llms.txt Nedir? Tanım, Format, Etkinlik Analizi ve Uygulama Rehberi

1. llms.txt Nedir?

llms.txt, büyük dil modellerinin bir web sitesinin en kritik içeriklerini daha kolay bulup anlaması için kök dizine yerleştirilen, Markdown formatında yazılmış önerilen bir metin dosyasıdır. Eylül 2024'te Avustralyalı teknolog Jeremy Howard tarafından ortaya atılan bu standart, robots.txt ve XML sitemap protokollerine benzer bir mantıkla çalışır; ancak hedef kitle arama motorları değil, ChatGPT, Claude ve Perplexity gibi LLM tabanlı yapay zeka sistemleridir.

İki somut sorunu hedef alır: LLM'lerin bağlam pencereleri çoğu siteyi bütünüyle işlemek için yeterince geniş değildir; reklamlar, JavaScript ve navigasyon elementleriyle dolu HTML sayfalarını düz metne dönüştürmek ise hata payı yüksek bir işlemdir. llms.txt bu iki soruna karşı modele "işte önemli olan bu" der — siteyi taratmak yerine içeriği önceliklendirerek sunar.

2. llms.txt Dosyası Nasıl Görünür? Format ve Yapı

Dosya sitenin kök dizinine yerleştirilen düz bir Markdown metin dosyasıdır; hem insan hem dil modeli okuyabilir, regex veya klasik ayrıştırıcılarla da işlenebilir.

Temel Yapı

Dört ana bölümden oluşur:

1. H1 başlığı — Sitenin veya projenin adı
2. Özet bloğu — Sitenin ne olduğunu birkaç cümlede açıklar
3. Ayrıntılı bilgi — Kapsam, kısıtlamalar veya bağlam notları
4. Bağlantı listeleri — LLM'nin okumasını istediğiniz sayfalara işaret eden URL'ler

# Örnek Site

> Yazılım geliştirici araçları üzerine dokümantasyon sitesi.

## Kılavuzlar

- [Kurulum](https://example.com/docs/setup): Ortam kurulumu adım adım.
- [API Referansı](https://example.com/docs/api): Tüm endpoint'lerin listesi.

Her URL'e isteğe bağlı kısa açıklama eklenebilir; bu, modelin sayfanın ne işe yaradığını bağlam olmadan anlamasını kolaylaştırır.

llms.txt ve llms-full.txt Farkı

llms.txt bağlantı listesi sunar — model istediği sayfayı ayrıca çeker. llms-full.txt ise sitenin ham metnini tek dosyada toplar; model ek istek göndermeden tüm içeriğe ulaşır. Boyut farkı ciddi olabilir: önerinin yazarına ait sitedeki llms-full.txt 115.378 kelime ve 966 KB büyüklüğündedir.

3. llms.txt ile robots.txt Arasındaki Fark

İki protokol benzer mantıkla çalışıyor gibi görünse de amaç, hedef kitle ve bağlayıcılık açısından köklü biçimde ayrışır.

4. llms.txt Gerçekten İşe Yarıyor mu? 300.000 Domain Analizi

Veri net: llms.txt, AI sistemlerinin sizi alıntılama biçimini şu an için değiştirmiyor.

SE Ranking yaklaşık 300.000 domaini Spearman korelasyonu, XGBoost regresyonu ve SHAP analizi kullanarak inceledi. Analiz edilen domainlerin yalnızca %10,13'ünde llms.txt dosyası mevcuttu. Trafik segmentlerine göre dağılım: düşük trafikli siteler %9,88, orta trafikli %10,54, yüksek trafikli (100.001+ ziyaret) ise %8,27.

XGBoost modeli, llms.txt değişkenini dışarıda bırakınca daha iyi çalıştı — istatistikte "gürültü değişkeni" olarak tanımlanır. Analiz, llms.txt ile AI atıf sıklığı arasında herhangi bir korelasyon olmadığını doğrudan gösterdi.

Platform tarafında da tutarsız bir tablo var: GPTBot zaman zaman llms.txt dosyalarını çekiyor ama bu sık değil. Google'ın AI Overviews ve AI Mode'u llms.txt yerine geleneksel SEO sinyallerine dayanıyor.

5. llms.txt Nasıl Oluşturulur ve Siteye Eklenir?

1. Markdown dosyasını hazırlayın

Bir metin editörü açın, .txt uzantısıyla kaydedin. HTML etiketleri veya JavaScript kullanmayın.

2. İçerik yapısını kurun

# Site Adı

> Sitenizin tek paragraflık özeti. LLM bu satırı önce okur.

## Hakkında
Sitenizin ne yaptığını, kimi hedeflediğini açıklayan metin.

## Kaynaklar
- [Ürün Sayfası](https://example.com/urun)
- [Blog](https://example.com/blog)
- [SSS](https://example.com/sss)

3. Dosyayı kök dizine yükleyin

Dosyayı llms.txt adıyla kök dizine koyun; doğru adres https://example.com/llms.txt olmalıdır.

4. robots.txt ile çelişki kontrolü yapın

robots.txt'te GPTBot gibi bir AI botunu engelliyorsanız, llms.txt'te o bota içerik sunmaya çalışmak çelişki yaratır.

5. Erişilebilirliği kontrol edin

Tarayıcınızda https://siteniz.com/llms.txt adresine gidin. Düz metin açılıyorsa dosya doğru konumda demektir.

6. llms.txt Eklemeli miyim? Maliyet-Fayda Değerlendirmesi

Kısa cevap: büyük ihtimalle evet, ama beklentinizi düşük tutun.

Dosya küçük, teknik riski sıfıra yakın, birkaç saatlik işten fazlasını gerektirmez. Buna karşın 300.000 domain analizi dosyanın AI atıf biçimini bugün itibarıyla değiştirmediğini gösteriyor.

Brett Tabke'ye göre Google, arama motoru ile LLM kod tabanını birleştirecek; bu gerçekleşirse llms.txt o geçiş döneminin köprüsü olabilir. Şimdilik "prim ucuz, tazminat belirsiz" bir sigorta poliçesi.

7. Sık Sorulan Sorular