CrowdGPT v2.6: Açık Kaynaklı İşbirlikçi LLM Güncellemesi
CrowdGPT projesi, veri merkezlerine ve büyük bütçelere ihtiyaç duymadan 1 milyar parametreli bir dil modeli oluşturma hedefiyle, v2.6 sürümünde büyük bir güncelleme aldı. Yeni sürüm, 6 gün içinde 4,5 milyar token eğitimi, güvenlik iyileştirmeleri ve açık kaynaklı bir benchmark sistemi sunuyor.

Özetle
- 1
Topluluk temelli, veri merkezi ve büyük bütçe gerektirmeyen işbirlikçi LLM eğitimi
- 2
v2.6 ile 6 günde 4,5 milyar token eğitildi, önceki iki ayın süresine kıyasla %100'den fazla hız artışı
- 3
Kriptografik imzalı istemci ve Byzantine çapraz‑kontrollerle güvenlik ve zehirleme riskleri azaltıldı
- 4
Veri gönderim hattı ve önceden doğrulanmış 400 KB veri setiyle işbirlikçi veri toplama
- 5
CrowdBench: açık kaynaklı, topluluk katkılı LLM benchmark platformu
CrowdGPT, topluluk üyelerinin kişisel bilgisayarlarını kullanarak ortak bir dil modeli eğitmesini sağlayan bir protokol üzerine kurulu. Proje, veri merkezlerine bağımlı olmadan, açık ve işbirlikçi bir yaklaşımla 1 milyar parametreli bir modelin eğitilebileceğini kanıtlamayı amaçlıyor ve daha büyük yoğun modeller ya da MoE mimarileri için ölçeklenebilir bir temel sunuyor.
v2.6 güncellemesi, topluluktan gelen güvenlik odaklı geri bildirimlerin büyük bir kısmını hayata geçirdi. Sunucu tarafında daha sağlam kontrol mekanizmaları eklendi, istemci kurulumu ve GPU seçimi iyileştirildi, çökme sorunları büyük ölçüde giderildi. Ayrıca, istemci kodu artık yalnızca geliştiricinin cihazında bulunan bir anahtar ile kriptografik olarak imzalanıyor, böylece otomatik güncellemeler üzerinden kötü amaçlı kod yürütülmesi riski ortadan kalktı.
Yeni sürümde "Engrams" özelliği Crowd‑v1 modeline aktarılarak gerçek‑bilgi hatırlama yeteneği artırıldı ve 400 KB'tan fazla topluluk verisi, doğrulama ve kürasyon süreçlerinden geçtikten sonra eğitimde kullanılmak üzere bir veri gönderim hattı oluşturuldu. Güvenlik açısından, Byzantine çapraz‑kontrollerle aynı veriyi üç farklı istemci aynı anda işleyerek sahte katkıların ve zehirleme saldırılarının etkisi büyük ölçüde azaltıldı; kötü niyetli bir istemcinin bir turda yalnızca %2‑3 oranında zararlı veri ekleyebilmesi sağlandı.
İlk kez tanıtılan CrowdBench, topluluk tarafından eklenebilen deterministik cevaplı genel zekâ sorularıyla LLM'leri test etmeyi amaçlayan açık kaynaklı bir benchmark platformu. Kod tabanı hâlâ erken aşamada olsa da, çalışır durumda ve geliştiricilerin model performansını standart bir çerçevede ölçmesine olanak tanıyor.
Yöney yorumu
CrowdGPT v2.6, açık kaynak topluluğunun büyük ölçekli dil modeli geliştirme konusundaki deneyimini artırıyor ve güvenlik önlemleriyle daha güvenilir bir federated öğrenme ortamı sunuyor. Ancak, henüz sınırlı kullanıcı tabanı ve performans ölçütleri nedeniyle etkisi zamanla netleşecek.
Bu haber Reddit LocalLLaMA kaynağından derlenip Türkçeye aktarıldı. Ayrıntılar ve orijinal metin için oka tıklayın.


