llms.txt Dosyalarının Kullanım Durumu: 137,000 Site İncelemesi

Methodology

Bu çalışma, 2026 Mayıs ayında trafik alan 137,210 domain üzerinde gerçekleştirildi. Her domainin kök dizininde bir llms.txt dosyasının varlığı kontrol edildi ve bu dosyalara yapılan tüm istekler analiz edildi. İstekler, HTTP yanıtlarına göre sınıflandırıldı ve her bir kullanıcı aracına göre ayrıldı.

Çalışma, teknik ve SEO bilinci yüksek kullanıcılar arasında gerçekleştirildiği için sonuçlar genel web popülasyonunu tam olarak yansıtmayabilir. Ayrıca, dosyaların llms.txt spesifikasyonuna uygunluğu özel olarak incelenmedi.

28% of domains publish llms.txt

137,000 domain arasında yapılan incelemeye göre, %28'lik bir kesim llms.txt dosyası yayınlıyor. Bu dosyaların yaygınlaşması, AI platformlarının bu dosyaları okuyacağına dair spekülasyonlarla desteklenmiştir, ancak henüz hiçbir büyük AI platformu bu dosyaları okuyacağını taahhüt etmemiştir.

97% of llms.txt files receive zero requests

Yayınlanan llms.txt dosyalarının %97'si hiçbir istek almadı. Bu dosyaların çoğu, botlar veya insanlar tarafından okunmamaktadır. Sadece %3'lük bir kesim, belirli bir trafik almıştır ve bu trafik genellikle ilginç ziyaretçilerden gelmektedir.

96% of requests to llms.txt files come from bots

llms.txt dosyalarına yapılan isteklerin %96'sı botlardan gelmektedir. İnsanlar tarafından yapılan istekler ise %4 seviyesindedir. Bu durum, dosyaların esasen makineler için yazıldığını ve makineler tarafından okunduğunu göstermektedir.

77% of the bots reading llms.txt aren’t from AI tools

llms.txt dosyalarını okuyan botların %77'si AI araçlarından gelmemektedir. Bu botlar, genellikle SEO denetim araçları, genel web tarayıcıları ve teknoloji profilleme araçları gibi farklı kategorilere aittir.

19.5% of requests come from AI bots

AI botları, llms.txt dosyalarına yapılan isteklerin %19.5'ini oluşturmaktadır. Bu botlar, genellikle kullanıcı adına hareket eden AI ajanları, veri toplama amaçlı eğitim tarayıcıları ve gerçek zamanlı kullanıcı sorgularını yanıtlamak için sayfaları getiren AI geri çağırma botlarıdır.

The agentic web is the real consumer, sending 10.5% of requests

AI ajanları ve bu ajanlara hizmet etmek için oluşturulan altyapı, llms.txt isteklerinin %10.5'ini oluşturmaktadır. Bu, dosyaların AI kodlama ajanları için referans materyali olarak en iyi şekilde çalıştığını gösteren bir bulgudur.

Training crawlers are the second-largest AI category at 5.3%

llms.txt dosyaları, eğitim korpuslarını beslemek için AI arama geri çağırma botlarından daha fazla kullanılmaktadır. Eğitim tarayıcıları, llms.txt dosyalarını AI geri çağırma botlarından yaklaşık 5 kat daha fazla getirmektedir.

AI retrieval bots barely register, with 1.1% of total requests

AI geri çağırma botları, toplam isteklerin sadece %1.1'ini oluşturmaktadır. Bu durum, llms.txt dosyalarının AI arama ürünleri tarafından çok az kullanıldığını göstermektedir.

12% of requests come from tools studying llms.txt, not consuming it

llms.txt standardını inceleyen, değerlendiren ve doğrulayan araçlar, toplam isteklerin %12'sini oluşturmaktadır. Bu araçlar, AI platformlarının bu dosyaları okuyup okumadığını belirlemeden önce bile bir ekosistem oluşturmuştur.

GEO/AEO tools send 5.8% of requests

GEO/AEO araçları, web sitelerini tarayarak AI arama ve ajan keşfi için hazır olup olmadıklarını değerlendirir. Bu araçlar, llms.txt varlığını birçok sinyalden biri olarak kullanır.

llms.txt discoverability bots cover 3.6% of requests

llms.txt dosyalarını kataloglayan ve doğrulayan araçlar, toplam isteklerin %3.6'sını oluşturmaktadır. Bu araçlar, AI geri çağırma botlarından ve AI asistanlarından daha fazla istek göndermektedir.