Bir Markdown Dosyası, Bir Gerçeklik Testi
llms.txt, Jeremy Howard’ın Eylül 2024’te önerdiği, modele sayfa haritası sunan bir markdown dosyasıdır; standart değildir ve Google onu kullanmıyor; pratikte asıl kaldıraç, içeriğin taranabilir ve JS’siz çıkarılabilir olması ile tek anlamlı kaynak kalmasıdır.
Dosya ne vaat ediyor
Metin kısa: sitenin köküne llms.txt koy, içeriği markdown olarak özetle, önemli sayfaları ve tam metin sürümü için llms-full.txt’yi işaret et. Amaç, bağlam penceresini gelişigüzel taramak yerine rehberli doldurmak.
İddiası HTML’i yıkmak değil, belge siteleri, kütüphane dokümantasyonları ve API’ler için bir kısayol sunmak. Dokümantasyon araçları dosyayı otomatik üretmeye başladı; benimseme, gerçek ama dar bir alanda: teknik içerik.
Google’ın duruşu net: arama sistemi bu dosyayı okumuyor. Yani dosya, en büyük kapıda anahtar değil, en iyi ihtimalle bir nezaket. Bir uyarı daha: dosyaya yazılan abartılı özet, modelin hangi sayfayı birincil saydığını değiştirmez; yalnızca bağlamı doldurur, yani içerik pazarlaması reflesi burada çalışmaz.
Üç ayrı görünürlük kanalı
Yapay zeka yanıtlarına girmenin üç yolu var ve üçü ayrı pazarlık ister: eğitim verisinde yer almak (sessiz, çoğu zaman kapalı), canlı taramada yer almak (robots.txt ve tarama bütçesi), retrieval dizininde yer almak (bir asistanın büyük kısmı hazır bir arama indeksinden beslenir).
llms.txt en iyi ihtimalle ikinci kanalda bir maliyet azaltması; oysa çoğu ajan araması dosyayı indirmeden sorguyu doğrudan arama sistemine verir. Üçüncü kanaldaki gerçek kaldıraç ise indeks kalitesi ve yapısal işaretleme.
Bu ayrımı yapmayan GEO danışmanlığı, dosyayı işin kendisi sanır; oysa dosya olsa olsa bir hız ve token avantajı: doğru sayfaya daha az maliyetle ulaşmak.
İşe yarayan kısım
Alıntıyı belirleyen şeyler tahmin edilebilir: taranabilirlik, yani JS render’a bağımlı olmayan HTML; tek anlamlı sayfa; sayı ve tarih içeren iddia cümleleri; açık kaynak gösterme alışkanlığı.
Modeller çok kaynaklı uzlaşıya yatkın: tek sitede yazan tuhaf bir iddia alıntı almaz; birden çok bağımsız kaynak aynı sayıyı ve tarihi tekrarlıyorsa model onu kullanır. Bu, llms.txt’den eski ve güçlü bir mekanizma.
Ayrıca maliyet disiplini: ham markdown uç noktaları ve düzgün başlık hiyerarşisi, ajanın işini ucuzlatır. Bulut sağlayıcılarının ajanlar için sadeleştirilmiş çıktı özellikleri bu yönü kurumsallaştırıyor.
Kanıtsız kısım
“llms.txt koyunca trafik arttı” cümlelerinin büyük kısmı satıcı sayfalarından gelir: kontrol grubu yok, aynı dönemdeki diğer değişiklikler ayrıştırılmıyor, sorgu seti seçkisiz atanmamış. Bu, iddiayı yanlışlamaz ama kanıt da yapmaz.
Benzer şekilde “GEO, SEO’nun yerini aldı” cümlesi de ölçümsüz: asıl kıymetli olan tıklamaya dönüşen alıntıdır; birçok rapor alıntı sayısını ziyaret sayarak ikisini karıştırıyor.
Dürüst özet: dosya bedava, zararsız, garantisi yok. Koymak için tek makul neden tarama maliyetini düşürme ihtimali; çıkarmak için neden yok.
Uygulama sırası
Pratikte sıra, ucuzdan pahalıya ve kesin olanın önce gitmeli:
İki işi karıştırmamak gerekiyor: dosya koymak bir saat, taranabilirliği kurmak bir çeyrek. İkincisi yapılmadan birincisi, modelin sitenize ilgisini değil yalnızca sitenizdeki dosya sayısını artırır; ölçüm de bunu gösterdiği için hayal kırıklığı kaçınılmaz olur.
- Yapay zeka botlarını robots.txt’de bilinçli yönet: izin ver ya da kes, sessiz bırakma
- Sunucu tarafı render ve anlamlı başlık hiyerarşisi; JS’siz de okunabilen HTML
- Schema.org işaretleme ve kanonik URL disiplini; aynı konuda parçalanmış kopyaları birleştir
- Alıntılanacak sayfalarda tarih, sayı ve birincil kaynak: modelin kopyalayacağı tek cümlelik iddia
- İstersen llms.txt: makul boyutta bir indeks gibi; beklentini ölçümle sınırla
Sık sorulan sorular
llms.txt zorunlu bir standart mı?
Hayır. Taslak bir topluluk önerisi; üzerine uzlaşılmış bir standart, zorunlu bir alan ya da doğrulama mekanizması yok. Farklı siteler farklı biçimde uyguluyor.
Google ya da diğer arama sistemleri okuyor mu?
Google arama için okumadığını belirtiyor. Asistan tarafında tarama hatları kapalı olduğu için, dosyanın okunup okunmadığını dışarıdan doğrulamak çoğu site için mümkün değil.
GEO ile SEO çelişir mi?
İyi kısmı çelişmiyor: taranabilirlik, tekil kaynaklık ve iddia netliği her iki tarafta da çalışır. Çelişki, tıklamayı değil alıntıyı optimize eden içerik çiftliğinde ortaya çıkıyor.
Önce neye para harcanmalı?
Altyapıya: render bağımlılığını kaldırmak, yinelenen sayfaları birleştirmek ve kaynak gösterme alışkanlığı. Dosya, bu üçü bittikten sonra eklenen bir ayrıntı.
Kaynakça
- llms.txt önerisi ve tartışma deposuAnswer.AI / GitHub
- Arama tarama ve indeksleme temelleriGoogle for Developers
- AI Overviews’ın arama üzerindeki etkisiSemrush
