qwen

Alibaba Cloud tarafından geliştirilen büyük dil modellerinin bir ailesidir. Temmuz 2024'te, bazı ölçütlerde en iyi Çince dil modeli ve antropik ve openai'nin en iyi modellerinin küresel olarak üçüncü sırada yer aldı.

Alibaba ilk olarak Nisan 2023'te Tongyi Qianwen adı altında Qwen beta başlattı. Model, çeşitli değişikliklerle Meta AI tarafından geliştirilen LLM Lama'ya dayanıyordu. Çin hükümetinden onay aldıktan sonra Eylül 2023'te kamuya açıklandı. [4] Aralık 2023'te 72b ve 1.8b modellerini açık kaynak olarak yayınlarken, Qwen 7B Ağustos ayında açık kaynaklı.

Haziran 2024'te Alibaba Qwen 2'yi piyasaya sürdü ve Eylül ayında bazı modellerini açık kaynak olarak yayınlarken en gelişmiş modellerini özel tuttu. Qwen 2, uzmanların bir karışımını kullanır.

Kasım 2024'te QWQ-32B önlemi, Openai'nin O1'e benzer bir muhakemeye odaklanan bir model Apache 2.0 lisansı altında piyasaya sürüldü, ancak veri kümesi veya eğitim yöntemi değil, sadece ağırlıklar serbest bırakıldı. QWQ 32.000 belirteç bağlam uzunluğuna sahiptir ve bazı kriterlerde O1'den daha iyi performans gösterir.

Qwen-VL serisi, bir vizyon transformatörünü bir LLM ile birleştiren bir görsel dil modelleri dizisidir. Alibaba, 2 milyar ve 7 milyar parametreli varyantlarla Qwen-VL2'yi yayınladı. Qwen-VL-Max, 2024 itibariyle Alibaba'nın amiral gemisi vizyon modelidir ve Alibaba Cloud tarafından bin giriş jetonları başına 0.00041 ABD doları maliyetle satılmaktadır.

Alibaba, Qwen-Audio ve Qwen2-Math gibi birkaç model türü yayınladı. Toplamda, modelleri 40 milyondan fazla indirilmiş olarak açık kaynak olarak 100'den fazla model yayınladı. Qwen'in ince ayarlı versiyonları, içerik kısıtlamaları olmadan herhangi bir kullanıcı talebine yanıt veren bir sürüm olan San Francisco merkezli Abacus AI tarafından geliştirilen "Libered Qwen" gibi meraklılar tarafından geliştirilmiştir.

Ocak 2025'te Alibaba Qwen 2.5-Max'i başlattı. Alibaba'dan bir blog yazısına göre, Qwen 2.5-Max, GPT-4O, Deepseek-V3 ve Lama-3.1-405b gibi diğer temel modelleri anahtar kıyaslamalarda daha iyi performans gösteriyor