AA artık saçma bir seviyeye geldi: En Çekici Dörtlükte Açık Ağırlıklı Modeller Yok
Artificial Analysis (AA) indeksinin en yeni sürümü v5.0, En Çekici Dörtlük (Most Attractive Quadrant) içinde açık ağırlıklı (open‑weight) modelleri tamamen dışarıda bıraktı. Kullanıcılar, DeepSeek, GLM, Kimi ve Qwen gibi önceki sürümlerde yer alan modellerin artık bu bölgeye girmediğini fark etti.
Özetle
- 1
AA v5.0 indeksinde En Çekici Dörtlük içinde açık ağırlıklı modeller tamamen yok.
- 2
DeepSeek, GLM, Kimi ve Qwen gibi daha önce öne çıkan modeller artık bu bölgede yer almıyor.
- 3
Kullanıcılar, indeksin gerçek zamanlı güncellenmediğini ve puanların toplu işlenebileceğini belirtiyor.
Reddit'in LocalLLaMA topluluğunda paylaşılan bir gönderide, kullanıcı Realistic_Gap_5871, AA'nın v5.0 sürümündeki indeks değişikliğine dikkat çekti. Yeni versiyonda, En Çekici Dörtlük içinde açık ağırlıklı modellerin sayısının sıfıra düştüğünü ve bu bölgenin Pareto çizgisine yaklaşmadığını gösteren bir ekran görüntüsü paylaştı. Önceki sürümlerde DeepSeek, GLM, Kimi ve Qwen gibi modeller bu alanda yer alırken, yeni güncelleme bu modelleri tamamen dışarıda bırakıyor.
Gönderide, indeksin gerçek zamanlı olarak güncellenmediği, puanların toplu olarak işlenebileceği ve bu yüzden grafiklerin hâlâ boş göründüğü ihtimali de dile getirildi. Kullanıcı, farklı tarayıcı ve gizli pencere kullanarak da aynı eksikliği doğruladı ve AA'nın güncellemeleri toplu olarak yapıyor olabileceğini öne sürdü. Ayrıca, tüm büyük modellerin manuel olarak eklenmiş olduğu bir link de paylaşılarak, mevcut durumun daha net görülmesi sağlandı.
Bu durum, açık ağırlıklı modellerin performans ve çekicilik açısından sektördeki algısını yeniden şekillendirebilir. Geliştiriciler, modellerinin AA indeksinde daha görünür olabilmesi için yeni metrikler ve optimizasyonlar üzerinde çalışmak zorunda kalabilir. Aynı zamanda, kapalı‑ağırlıklı (closed‑weight) büyük modellerin hâlâ öne çıktığı bir ortamda, açık ağırlıklı toplulukların rekabet gücünü koruması için stratejik adımlar atması gerekebilir.
Topluluk üyeleri, AA indeksinin güncellemelerini yakından izlemeye devam ederken, bu tür değişikliklerin benchmark ekosistemindeki şeffaflık ve adillik tartışmalarını da alevlendireceği öngörülüyor.
Yöney yorumu
AA indeksindeki bu değişiklik, açık ağırlıklı modellerin sektördeki görünürlüğünü azaltarak geliştiricileri performans ve değerlendirme metriklerini yeniden gözden geçirmeye zorlayabilir. Kullanıcılar ise indeksin güncelleme sıklığı ve şeffaflığı konusunda daha fazla bilgi talep edecek.
Bu haber Reddit LocalLLaMA kaynağından derlenip Türkçeye aktarıldı. Ayrıntılar ve orijinal metin için oka tıklayın.
