Dil Modelleri

GPT, Claude, Grok, Gemini ve model karşılaştırmaları, eğitim ve performans. · 137 yazı

Dil Modelleri

DeepSeek'in Ucuzluk Mimarisi Sessiz Bir Kusur Taşıyor Olabilir: 'Uzun Metinde Periyodik Körlük Noktaları'

Yeni bir ön-baskı araştırma, DeepSeek'in uzun bağlam maliyetini düşüren KV-önbellek sıkıştırma tekniğinin, bilgi sıkıştırma penceresi sınırlarına göre konumlandığında geri çağırma doğruluğunu 40 puana varan oranlarda düşürebildiğini öne sürüyor. Ortalama benchmark puanları bu 'periyodik zayıf noktaları' gizliyor olabilir.