Yapay Zeka Bot Trafigi Hizla Artıyor. 48 Gunluk Sunucu Gunlukleri GPTBot, ChatGPT, ClaudeBot ve 16 Diger Botun Ne Yaptıgını Ortaya Koyuyor.
Yapay Zeka Bot Trafigi Artık Damla Damla Degil
Subat ile Mart 2026 ortası arasında wislr.com’daki yapay zeka bot aktivitesi sadece buyumedi. Sekil degistirdi.
- ChatGPT-User trafigi 5 kat arttı, yedi hafta icinde
- GPTBot, 12 Mart’a kadar tamamen yokken, tek bir haftada 187 istek gerceklestirdi; bunların 152’si 3 dakikalık bir patlamadaydı
- GPTBot yeni bir bot degil. OpenAI’ın web genelinde yıllardır aktif olan cekirdek egitim tarayıcısıdır. Ancak her siteyi surekli olarak taramıyor gorunuyor. Veriler, bir sitenin icerigi OpenAI ekosisteminde ilgi gormeye basladıgında o sitede aktif hale geldigini gosteriyor. wislr.com’a ChatGPT-User yonlendirmeleri, GPTBot ortaya cıkmadan once zaten 5 kat artmıstı.
- OAI-SearchBot hacmi 4 kat arttı
- 18-19 Mart’ta hem ClaudeBot hem de GPTBot, farklı sirketlerden, aynı gun ilk kez sitemap.xml istemeye basladı
Bu, yapay zeka platformlarının icerigi kesfetme ve indeksleme biciminde bir degisim.
Web Siteniz Icin 20 Cıkarım
- Google Analytics bunların hicbirini goremiyor. Yapay zeka botları JavaScript calistırmaz. Istemci taraflı analize guveniyorsanız, yapay zeka bot trafiginiz gorunmezdir. Sunucu taraflı gunluk kaydı bunu olcmenin tek yoludur.
- sitemap.xml’iniz artık daha onemli hale geldi. GPTBot ve ClaudeBot, Mart 2026’da ilk kez sitemap tuketmeye basladı. Sitemap’iniz eski, eksik veya dil varyantları yoksa, yapay zeka tarayıcıları icerigi kaciracaktır.
- robots.txt evrensel olarak uyulmuyor. GPTBot ve Meta-WebIndexer bunu hic kontrol etmiyor. Yapay zeka icerik stratejiniz robots.txt yonergelerine dayanıyorsa, en aktif iki tarayıcının bunları tamamen goz ardı ettigini bilin.
- Cok dilli icerik orantısız tarama ilgisi gorüyor. Meta-WebIndexer (%80), GPTBot (%62) ve Bingbot (%60) gibi botlar butcelerinin buyuk bolumunu dil varyantlarına harcıyor. Cevirilmis icerik yayınlıyorsanız, yapay zeka platformları bunu agresif sekilde indeksliyor.
- ChatGPT-User trafigi, yapay zeka sohbetlerinde marka referansının dogrudan bir sinyalidir. Her istek, gercek bir kisinin URL’nizi ChatGPT’ye yapıstırmasını temsil ediyor. Bu olculebilir agızdan agıza pazarlamadır ve hızla buyuyor.
- Yapay zeka botları sabit akıslar halinde degil, patlamalar halinde tarar. GPTBot 3 dakikalık bir pencerede 114 istek/dakikaya ulastı. Sunucunuz patlama trafigini kaldıramıyorsa, yapay zeka tarayıcıları indeksleme calısmaları sırasında kısıtlanabilir veya hatalarla karsilasabilir.
- OpenAI ve Anthropic her biri 3 ayrı bot isletiyor. Biri egitim/indeksleme, biri arama, biri canlı kullanıcı oturumları icin. Birini engellemek digerlerini engellemez. robots.txt’nizde her biri icin ayrı yonergeler gerekir.
- OAI-SearchBot ve Googlebot, hacimli gorsel ceken tek botlardır. Makale gorselleriniz anlamlı icerik tasıyorsa (grafikler, diyagramlar, veri gorsellestirmeleri), bunlar arama sonuclarında kullanacak botlardır.
- ChatGPT-User yalnızca metin cıkarır. Sıfır gorsel, sıfır CSS, sıfır JS. Yapay zeka sohbetlerine cekilen sey HTML iceriginizdir. Yapay zeka gorunurlugu icin gorsel tasarımdan cok yapılandırılmıs, net metin onemlidir.
- Yapay zeka tarayıcıları farklı saatlerde zirve yapar. GPTBot 04:00 UTC’de istek atar. Claude-SearchBot gece boyunca zirve yapar. PerplexityBot 23:00, 05:00 ve 09:00’da patlama yapar. Site degisikliklerini ABD saatleri dısında dagıtıyorsanız, yapay zeka botları bunları ilk gorenler olabilir.
- Meta, hacim olarak en agresif yapay zeka tarayıcısıdır. Meta-WebIndexer bu veri setinde diğer tum botlardan daha fazla istek gonderdi, sıfır robots.txt kontroluyle. Meta’nın tarayıcılarını takip etmiyorsanız, en buyuk oyuncuyu kaçırıyorsunuz.
- llms.txt benimsenmesi hala teorik duzeydir. 48 gun boyunca sıfır yapay zeka botu /llms.txt istedi. Sonunda bir standart haline gelebilir, ancak su anda hicbir tarayıcı bunu aramıyor.
- Applebot sayfalarınızı tam olarak isler. CSS, JS ve gorselleri ceker (traginin %47’si). Iceríginizin tamamlanması icin JavaScript isleme gerektiriyorsa, Applebot bunu gorur, ancak cogu yapay zeka botu gormez.
- ChatGPT-User trafigi kuresel olarak dagılmıstır. 15 ulke, 584 benzersiz IP. Iceríginiz yalnızca ABD’de degil, dunya capında yapay zeka sohbetlerinde referans gostiriliyor.
- Teknik, nasıl yapılır icerikleri yapay zeka sohbetlerinde en cok referans gosteriliyor. En cok ChatGPT-User istegi alan sayfalar uygulama kılavuzları ve teknik acıklayıcılardı. Derin, spesifik icerik yapay zeka referansları kazandırır.
- Bytespider ve CCBot yalnızca robots.txt’yi kontrol eder, hic taramaz. robots.txt yonergelerinizi tuketiyorlar ancak takip etmiyorlar. Bu degisebilir, ancak su anda sıfır icerik indekslemeyle uyumluluk yuku olusturuyorlar.
- Yapay zeka tarama hacmi bir gecede degisebilir. GPTBot tek bir haftada 0’dan 187 istege cıktı. Tarama butcesi projeksiyonlarınızın kademeli buyume degil, ani sıcrama degisikliklerini hesaba katması gerekir.
- IP analizi bot kimligini ortaya koyar. ChatGPT-User’ın neredeyse 1:1 IP-istek oranı bireysel kullanıcı oturumlarını kanıtlar. GPTBot’un 2 IP’si merkezi altyapıyı kanıtlar. IP desenleri, gercek kullanıcı tetiklemeli cekimleri otomatik taramadan ayırt etmeye yardımcı olur.
- Bot aileleri arasında koordineli tarama olayları gerceklesir. GPTBot ve OAI-SearchBot 19 Mart’ta aynı Microsoft altyapısından es zamanlı olarak ateslendir. Bir OpenAI botu hızlandıgında, digerlerinin de takip etmesini bekleyin.
- Hic duymadıgınız botlar zaten ziyaret ediyor. PromptingBot, LinkupBot, Brightbot, Observer ve digerleri aktif olarak icerik tarıyor. Yapay zeka bot ortamı, bilinen isimlerden cok daha genis.
Veri
Kaynak: wislr.com’daki CDN script istek gunlugunden 288.566 gunluk dosyası
Donem: 1 Subat - 20 Mart 2026
Toplam istek: 71.603
Analiz edilen yapay zeka/tarayıcı bot istekleri: 12.099 (tum trafigin %16,9’u)
wislr.com’a gelen her HTTP istegi, tam istek meta verilerini (user agent, cografi konum, basliklar, zamanlama) yakalayan bir CDN scriptinden gecer. Bu bize yapay zeka botlarının tam olarak ne yaptıgını, ne sıklıkta ve ne okudugunu gosteren zemin gercegi verir.
Kendi yapay zeka bot trafiginizde bu duzeyde gorunurluk mü istiyorsunuz?
Gorusme PlanlaBot Hacim Sıralamaları
| Sıra | Bot | Toplam İstek | Sub | Mar (kısmi) | Egilim |
|---|---|---|---|---|---|
| 1 | Meta-WebIndexer | 1,833 | 707 | 1,126 | +59% |
| 2 | Bingbot | 1,221 | 547 | 674 | +23% |
| 3 | ChatGPT-User | 923 | 230 | 693 | +201% |
| 4 | Googlebot | 816 | 386 | 430 | +11% |
| 5 | Claude-SearchBot | 549 | 216 | 333 | +54% |
| 6 | Applebot | 495 | 257 | 238 | -7% |
| 7 | PerplexityBot | 456 | 244 | 212 | -13% |
| 8 | OAI-SearchBot | 330 | 117 | 213 | +82% |
| 9 | ClaudeBot | 206 | 69 | 137 | +99% |
| 10 | GPTBot* | 187 | 0 | 187 | Mart’ta Yeni |
| 11 | Amazonbot | 71 | 27 | 44 | +63% |
| 12 | Bytespider | 68 | 33 | 35 | +6% |
| 13 | Claude-User | 18 | 6 | 12 | +100% |
| 14 | CCBot | 5 | 2 | 3 | Minimal |
| 15 | Meta-ExternalAgent | 4 | 0 | 4 | Yeni |
| 16 | DuckAssistBot | 4 | 0 | 4 | Yeni |
| 17 | Perplexity-User | 3 | 3 | 0 | Minimal |
| 18 | YouBot | 2 | 0 | 2 | Yeni |
| 19 | GoogleOther | 2 | 1 | 1 | Minimal |
*GPTBot yeni bir bot degil. OpenAI’ın web genelinde yıllardır aktif olan cekirdek egitim tarayıcısıdır. “Mart’ta Yeni” bu site icin yeni anlamına gelir. Veriler, GPTBot’un bir sitenin icerigi OpenAI ekosisteminde ilgi gormeye basladıgında o sitede aktif hale geldigini gosteriyor: ChatGPT-User yonlendirmeleri, GPTBot ortaya cıkmadan once zaten 5 kat artmıstı.
Haftalık Hacim Eilimleri
| Bot | Sub H1 | Sub H2 | Sub H3 | Sub H4 | Mar H1 | Mar H2 | Mar H3 |
|---|---|---|---|---|---|---|---|
| GPTBot | 0 | 0 | 0 | 0 | 0 | 4 | 183 |
| ChatGPT-User | 39 | 66 | 65 | 60 | 72 | 304 | 317 |
| OAI-SearchBot | 28 | 34 | 29 | 26 | 28 | 46 | 139 |
| ClaudeBot | 10 | 14 | 9 | 36 | 51 | 24 | 62 |
| Claude-SearchBot | 31 | 51 | 47 | 87 | 121 | 68 | 144 |
| PerplexityBot | 22 | 132 | 62 | 28 | 37 | 77 | 98 |
| Bingbot | 132 | 163 | 136 | 116 | 151 | 248 | 275 |
| Meta-WebIndexer | 63 | 35 | 271 | 338 | 396 | 541 | 189 |
| Amazonbot | 8 | 6 | 7 | 6 | 2 | 2 | 40 |
Mar H3 (15-20 Mart) kırılma haftasıydı. GPTBot neredeyse sıfırdan 183 istege fırladı. ChatGPT-User haftalık 300+ istegi surduruyor (Subat baslangıcının 5 katı). OAI-SearchBot 139’a ulastı, 4 katlık bir sıcrama. OpenAI’ın bot filosu genelinde koordineli bir sey oldu.
Bireysel Bot Profilleri
GPTBot (OpenAI’ın egitim/indeksleme tarayıcısı)
Toplam: 187 istek | Aktif oldugu tarih: 12 Mart | IP’ler: 2 (son derece yogun)
GPTBot yeni bir bot degil. OpenAI bunu “uretken yapay zeka temel modellerimizi daha kullanıslı ve guvenli hale getirmek” icin kullanılan tarayıcı olarak tanımlıyor; temel modellerinin egitiminde kullanılabilecek icerigi tarıyor. Web genelinde yıllardır faaliyet gosteriyor. Burada dikkat cekici olan, GPTBot’un 12 Mart’a kadar wislr.com’da tamamen yokken 19 Mart 04:38 UTC‘de buyuk bir tarama patlamasıyla aktive olmasıdır: 3 dakikada 152 istek (zirve 114 istek/dakika). Her makaleyi her dil varyantında sistematik olarak taradı.
Bu, GPTBot’un her siteyi surekli olarak taramadıgını gosteriyor. Bir sitenin icerigi OpenAI ekosisteminde ilgi gormeye basladıgında o sitede aktif hale geliyor, cunku wislr.com’a ChatGPT-User yonlendirmeleri GPTBot ortaya cıkmadan once zaten 5 kat artmıstı.
Ne tarıyor:
- Makaleler: isteklerin %67’si
- Dil varyantları: %61,5, 11 dil surumunun tamamını taradı (de, fr, pl, hi, nl, uk, pt, ms, tr, it, es)
- Gorseller: 28 istek (makale baslikları, yazar fotoğrafları)
- Sitemap.xml: 2 istek (19 Mart’ta basladı, tamamen yeni davranıs)
- robots.txt: Sıfır. Hic kontrol etmiyor.
Tarama zamanlaması: Tum isteklerin %81’i 04:00 UTC’de. Asırı patlama deseni, neredeyse tum trafik tek bir 3 dakikalık pencerede.
Altyapı: Microsoft Limited ASN’den calisır, yalnızca ABD. Trafigin %97,9’u tek bir IP’den.
GPTBot’un 19 Mart’taki patlaması, aynı Microsoft altyapısından bir OAI-SearchBot patlamasıyla es zamanlıydı: aynı zaman damgasında 50 istek/dakika. Bu koordineli gorunuyor.
OAI-SearchBot (OpenAI’ın arama tarayıcısı)
Toplam: 330 istek | Egilim: Subat’tan Mart’a +%82 | IP’ler: 81
OAI-SearchBot, OpenAI’ın GPTBot’tan ayrı ozel arama tarayıcısıdır. Herhangi bir yapay zeka botu arasında en ısrarcı robots.txt denetleyicisidir, istisnasız her gun 3-6 kez kontrol eder.
Ne tarıyor:
- robots.txt: tum trafigin %54,5’i (180 istek, gunluk ortalama 3,8)
- Makaleler: 52 istek
- Gorseller: 55 istek, makale gorsellerini, yazar fotoğraflarını, sayfa ekran goruntülerini aktif olarak indiriyor
- Ana sayfa: 9 istek
Tarama zamanlaması: Gun boyunca yayılmıs, 04:00 ve 20:00 UTC’de hafif zirveler.
Altyapı: Microsoft Limited (%87) + Microsoft Corp (%13), yalnızca ABD.
robots.txt’ye uyan tek OpenAI botu (takıntılı sekilde kontrol eder). Googlebot dısında hacimli gorsel ceken tek yapay zeka botu, muhtemelen arama sonuc kartları icin.
ChatGPT-User (canlı kullanıcı oturumu cekmesi)
Toplam: 923 istek | Egilim: Subat’tan Mart’a +%201 | IP’ler: 584
Bu bir tarayıcı degil. Gercek bir kisi ChatGPT sohbetine bir wislr.com URL’si yapıstırdıgında tetiklenir. 584 benzersiz IP (isteklerle neredeyse 1:1), bunların bireysel kullanıcı oturumları oldugunu dogruluyor. Bu, wislr.com iceriginin yapay zeka sohbetlerinde ne sıklıkta referans gosterildiginin en net sinyalidir.
En cok referans gosterilen icerikler:
| İstek | Makale |
|---|---|
| 225 | Shopify Same-Domain Checkout Analytics |
| 112 | Cloudflare Crawl Endpoint Pros and Cons |
| 103 | Cloudflare Crawl Best Settings |
| 91 | Cloudflare CDN Request Logging for Shopify |
| 81 | 6 Core Tasks for Better 301 Redirects |
| 50 | AI Performance Metrics: Seven KPIs |
| 37 | Ana Sayfa |
| 30 | Essential Tools for Site Migrations |
| 29 | OpenAI KPIs and Success Metrics 2026 |
| 23 | AEO Readiness Comparison |
Ne cekmiyor: Sıfır gorsel, sıfır CSS, sıfır JS. Saf HTML icerik cıkarımı, yalnızca metni istiyor.
Tarama zamanlaması: 24 saat boyunca esit dagılmıs, insan kullanım desenlerini takip ediyor.
Cografi dagılım: ABD (%50), Polonya (%16), Avustralya (%5), İspanya (%5), Japonya (%5), Brezilya (%4), toplam 15 ulke. En yoğun sehirler: Varsova (149), Phoenix (145), San Antonio (126), Des Moines (91).
ClaudeBot (Anthropic’in egitim/indeksleme tarayıcısı)
Toplam: 206 istek | Egilim: Subat’tan Mart’a +%99 | IP’ler: 22
ClaudeBot buyuk olcude uyumluluk kontrolune odaklanmıstır: trafigin %85’i robots.txt’dir.
Ne tarıyor:
- robots.txt: 175 istek (%85), Subat basında gunde 1-2’den Mart’a kadar gunde 6-12’ye yükseldi
- Sitemap.xml: 14 istek, 18 Mart’ta basladı (daha once hic dokunmamıstı)
- Gorseller: 10 istek (tumu 18 Mart’ta)
- Icerik sayfaları: cok az
ClaudeBot zaman icerisinde robots.txt’yi giderek daha agresif kontrol ediyor. 18 Mart’ta sitemap.xml’e aniden ilgi gostermesi (o gun 5 istek, 19 Mart’ta 8 istek) Anthropic’ten yeni bir tarama stratejisi yayınını gosteriyor.
Altyapı: Anthropic, PBC ASN (%97), yalnızca ABD.
Claude-SearchBot (Anthropic’in web arama tarayıcısı)
Toplam: 549 istek | Egilim: Subat’tan Mart’a +%54 | IP’ler: 8
ClaudeBot ve Claude-User’dan ayrı bir Anthropic botu. Claude’un web arama ozelligini besler. ClaudeBot’tan daha agresif, gercekten icerik tarıyor.
Ne tarıyor:
- robots.txt: 164 istek (%30), gunluk, gunde 1-3’ten 7-10’a yükseliyor
- Sitemap.xml: 135 istek, 25 Subat’ta basladı, Bingbot’tan sonra en aktif ikinci sitemap tuketicisi oldu
- Makaleler: 142 istek (%26)
- Dil varyantları: trafigin %23,3’u
- Ana sayfa: 45 istek
Tarama zamanlaması: Gece agırlıklı, 22:00, 01:00, 00:00 UTC’de zirve yapar.
Toplamda, Anthropic 3 farklı bot isletiyor (ClaudeBot, Claude-SearchBot, Claude-User), toplam 773 istek. Bu, Anthropic’i Meta-WebIndexer ve ChatGPT-User’dan sonra ucuncu en buyuk yapay zeka bot varlıgı yapıyor.
Claude-User (Anthropic’in canlı oturum cekmesi)
Toplam: 18 istek | IP’ler: 8
ChatGPT-User’ın Anthropic karsılıgı. Birisi Claude sohbetinde bir URL payastıgında tetiklenir. ChatGPT-User’dan cok daha dusuk hacim (18’e karsı 923).
Ne tarıyor: robots.txt (9), ardından Cloudflare ve bir hukuk firması vaka calısması hakkında makaleler.
Altyapı: Google LLC ASN (%100), yalnızca ABD. Anthropic’in kendi altyapısından degil, Google Cloud uzerinden calısıyor.
PerplexityBot (Perplexity’nin indeksleme tarayıcısı)
Toplam: 456 istek | Egilim: Subat’tan Mart’a -%13 | IP’ler: 13
Patlamalı tarama deseni: Sub H2’de 132 istek, Sub H4’te 28’e duser, Mar H3’te tekrar 98’e cıkar.
Ne tarıyor:
- Makaleler: trafigin %77’si, yapay zeka performans metrikleri icerigini yogun sekilde hedefliyor
- robots.txt: 71 istek (sabit gunde 1-4)
- Gorseller: 18 istek (makaleye ozel gorseller)
- Sitemap.xml: Sıfır. Hic istemiyor.
- Dil varyantları: %52,9, genis cok dilli kapsam
Tarama zamanlaması: 23:00, 05:00 ve 09:00 UTC’de uc ayrı patlama penceresi.
Altyapı: Amazon Technologies Inc. (%96), yalnızca ABD. 13 IP, orta yogunluk.
Googlebot
Toplam: 816 istek | IP’ler: 72
Ana sayfa agırlıklı (trafigin %27’si) ve en “tam isleme” yapan tarayıcı. Icerikle birlikte gorseller, CSS, JS de ceker.
Ne tarıyor:
- Ana sayfa: 220 istek (%27)
- Gorseller: 152 istek
- CSS: 132 istek
- JS: 54 istek
- Makaleler: 141 istek
- robots.txt: 68 istek
- Sitemap.xml: 5 istek (ara sıra)
Dil varyantları: Yalnızca %10,4, diger botlardan belirgin sekilde daha az cok dilli.
Altyapı: Google LLC (%91), bir kısmı İsvec’ten (%8). 24 saat boyunca duz tarama deseni.
Bingbot
Toplam: 1.221 istek | Egilim: Subat’tan Mart’a +%23 | IP’ler: 258
En tutarlı ve genis kapsamlı tarayıcı. Aynı zamanda baskın sitemap tuketicisi.
Ne tarıyor:
- Makaleler: %68 (yogun dil varyantı kapsamıyla)
- Sitemap.xml: 139 istek (gunde 2-8, her gun), acık arayla en aktif sitemap tarayıcısı
- Gorseller: 78 istek (sosyal ikonlar, panel PNG’leri, makale gorselleri)
- robots.txt: 36 istek
Dil varyantları: %60,3, Hollandaca (97) ve Almanca (98) varyantlarına yogun odaklanma.
Tarama zamanlaması: 24 saat boyunca duz kapsam, her zaman aktif.
Meta-WebIndexer
Toplam: 1.833 istek | Egilim: Subat’tan Mart’a +%59 | IP’ler: 156
Genel olarak en yuksek hacimli bot. Buyuk olcude icerige, ozellikle dil varyantlarına odaklanmıs.
Ne tarıyor:
- Makaleler: trafigin %88’i
- Dil varyantları: %79,8, acık arayla en agresif cok dilli tarayıcı
- Sitemap.xml: 30 istek
- robots.txt: Sıfır. robots.txt’yi hic kontrol etmiyor.
Tarama zamanlaması: Aksam/gece agırlıklı, 20:00-21:00 ve 00:00-01:00 UTC’de zirve yapar.
Altyapı: Meta Platforms Ireland Ltd ASN, yalnızca ABD.
GPTBot gibi, Meta-WebIndexer de robots.txt’yi kontrol etmiyor. GPTBot’tan farklı olarak, tum donem boyunca tutarlı sekilde aktif olmustur.
Davranıs Desenleri
robots.txt Uyumu
| Davranıs | Botlar |
|---|---|
| Takıntılı denetleyiciler (gunde birden fazla kez) | OAI-SearchBot (gunde 3,8), ClaudeBot (gunde 4), Claude-SearchBot (gunde 4) |
| Duzenli denetleyiciler (gunluk veya neredeyse gunluk) | PerplexityBot, Googlebot, Applebot, Amazonbot, FacebookExternalHit (saat gibi tam gunde 1) |
| Yalnızca robots.txt’yi kontrol eder, baska bir sey yapmaz | Bytespider (%100), CCBot (%100) |
| robots.txt’yi hic kontrol etmez | GPTBot, Meta-WebIndexer, ChatGPT-User |
GPTBot ve Meta-WebIndexer, dikkate deger uyumsuz botlardır. Kurallara hic bakmadan agresif sekilde tararlar.
Sitemap Kefi
| Bot | Sitemap İstekleri | İlk İstek | Desen |
|---|---|---|---|
| Bingbot | 139 | 1 Sub | Gunluk, gunde 2-8 (sitemap kralı) |
| Claude-SearchBot | 135 | 25 Sub | Yogun, 2. en aktif oldu |
| Meta-WebIndexer | 30 | 5 Sub | Duzenli |
| ClaudeBot | 14 | 18 Mar | Tamamen yeni davranıs |
| Googlebot | 5 | 2 Sub | Ara sıra |
| GPTBot | 2 | 19 Mar | Tamamen yeni davranıs |
| Applebot | 1 | 17 Mar | Tek istek |
18-19 Mart bir donusum noktasıdır. Hem ClaudeBot hem de GPTBot ilk kez sitemap.xml istemeye basladı; bu, Anthropic ve OpenAI’dan es zamanlı yeni tarama stratejisi yayınlarını gosteriyor.
llms.txt / Yapay Zekaya Ozel Dosya İstekleri
Hicbir yapay zeka botu /llms.txt veya /llm.txt istemiyor. GPTBot, ClaudeBot, PerplexityBot veya herhangi bir yapay zeka tarayıcısından sıfır istek.
llms.txt’yi kontrol eden tek bot Dataprovider.com (bir web analiz sirketi): Sub-Mar arasında 3 istek.
/.well-known/ai-plugin.json icin iki istek Firefox tarayıcılarından geldi, botlardan degil.
Dil Varyantı Tarama
| Bot | Trafigin Dil Varyantlarındaki Yüzdesi | Kapsam |
|---|---|---|
| Meta-WebIndexer | %79,8 | 11 dilin tumu, esit dagılmıs |
| GPTBot | %61,5 | 11 dilin tumu, her birinden 8-12 |
| Bingbot | %60,3 | 11’in tumu, Hollandaca/Almanca agırlıklı |
| PerplexityBot | %52,9 | 11’in tumu, Almanca/İspanyolca basta |
| Amazonbot | %32,4 | 11’in tumu |
| Claude-SearchBot | %23,3 | 11’in tumu, oldukca esit |
| Applebot | %23,0 | 11’in tumu |
| OAI-SearchBot | %11,2 | 11’in tumu |
| Googlebot | %10,4 | İspanyolca/Portekizce basta |
| ChatGPT-User | %4,7 | Fransızca/İspanyolca/İtalyanca (kullanıcı gurdumlu) |
Meta-WebIndexer ve GPTBot en agresif cok dilli tarayıcılardır. ChatGPT-User’ın dusuk yuzdesi mantıklı: gercek kullanıcıların hangi dillerde okudugunu yansıtıyor.
Gorsel Tarama
| Bot | Gorsel İstekleri | Ne Cekiyorlar |
|---|---|---|
| Googlebot | 152 | SVG ikonlar, logolar, faviconlar, isleme varlıkları |
| Google-InspectionTool | 108 | Sosyal ikonlar, vaka calısması gorselleri |
| Googlebot-Image | 75 | Favicon, logo varyantları, makale gorselleri |
| Bingbot | 78 | Sosyal ikonlar, panel PNG’leri, makale gorselleri |
| OAI-SearchBot | 55 | Makale gorselleri, yazar fotoğrafları, ekran goruntüleri |
| Applebot | 32 | Makale kapak gorselleri |
| GPTBot | 28 | Makale baslikları, yazar fotoğrafları (tumu 19 Mar’da) |
| PerplexityBot | 18 | Makale gorselleri |
| ClaudeBot | 10 | Yazar fotoğrafı, ekran goruntüleri (tumu 18 Mar’da) |
| ChatGPT-User | 0 | Asla gorsel cekmez |
Googlebot isleme icin gorsel ceker. OAI-SearchBot muhtemelen arama sonuc kartları icin ceker. GPTBot ve ClaudeBot her biri tek bir gunde yogun gorsel patlamaları yaptı, toplu indeksleme calısmalarını gosteriyor.
ChatGPT-User sıfır gorsel ceker. Saf metin cıkarımı.
Kesfedilen Diger Dikkat Cekici Botlar
PromptingBot/1.0.0 (104 istek)
- Google Cloud altyapısında calisır
- 24 Subat ile 13 Mart arasında aktif
- Tam sayfa isleme yapar (CSS, JS, gorseller, sosyal ikonları ceker)
- Yapay zeka performans metrikleri icerigini hedefler
LinkupBot/1.0 (47 istek)
- linkup.so’dan, bir web indeksleme hizmeti
- Microsoft altyapısı, koken: Fransa
- robots.txt’yi kontrol eder, ardından goc/yonlendirme icerigine odaklanır
Brightbot 1.0 (46 istek)
- truview LLC’den, 41 benzersiz IP
- Hollandaca dil varyantlarına odaklanır
Observer/1.0 (36 istek)
- obsrvr.net’ten, Alman/Fin altyapısı
- Yalnızca robots.txt’yi ve tek bir Fransızca makaleyi tarıyor
Dataprovider.com (148 istek)
- Kanadalı web analiz sirketi
- /llms.txt’yi kontrol eden tek bot (3 kez)
- /ads.txt ve /humans.txt’yi de kontrol eder
HTTP Metotları
Her bot istisnasız olarak yalnızca GET kullanır. 12.099 bot isteginin tamamında sıfır HEAD, POST veya diger metot.
Ulke/ASN Verileri
| Bot | Birincil ASN | Ulkeler |
|---|---|---|
| GPTBot | Microsoft Limited | Yalnızca ABD |
| OAI-SearchBot | Microsoft Limited (%87) + Microsoft Corp (%13) | Yalnızca ABD |
| ChatGPT-User | Microsoft Corporation (%78) | ABD (%50), Polonya (%16), Avustralya (%5), İspanya (%5), Japonya (%5), Brezilya (%4), 15 ulke |
| ClaudeBot | Anthropic, PBC (%97) | Yalnızca ABD |
| Claude-SearchBot | Anthropic, PBC (%100) | Yalnızca ABD |
| Claude-User | Google LLC (%100) | Yalnızca ABD |
| PerplexityBot | Amazon Technologies Inc. (%96) | Yalnızca ABD |
| Amazonbot | Amazon (%100) | Yalnızca ABD |
| Applebot | Apple Inc. (%100) | Yalnızca ABD |
| Bingbot | Microsoft Corporation (%99,7) | Yalnızca ABD |
| Googlebot | Google LLC (%91) | ABD (%92), İsvec (%8) |
| Meta-WebIndexer | Meta Platforms Ireland Ltd (%100) | Yalnızca ABD |
| Bytespider | Amazon Singapore (%53), China Unicom (%47) | Singapur (%53), Cin (%47) |
Bytespider (Singapur/Cin) dısında tum buyuk yapay zeka botları ABD altyapısından calisır. ChatGPT-User, insan kullanıcı tabanını yansıtarak gercek kuresel dagılıma sahip tek bottur.
Sık Sorulan Sorular
2026’da web sitelerini en sık ziyaret eden yapay zeka botları hangileri?
wislr.com’dan elde edilen 48 gunluk sunucu gunlugu verilerine gore en yuksek hacimli yapay zeka botları Meta-WebIndexer (1.833 istek), ChatGPT-User (923 istek), Claude-SearchBot (549 istek), Applebot (495 istek), PerplexityBot (456 istek), OAI-SearchBot (330 istek), ClaudeBot (206 istek) ve GPTBot (187 istek) olarak sıralanıyor. ChatGPT-User, Subat ve Mart 2026 arasında %201 ile en keskin buyumeyi gosterdi.
Yapay zeka botları taramadan once robots.txt’yi kontrol ediyor mu?
Cok farklılık gosteriyor. OAI-SearchBot istisnasız olarak gunde 3-6 kez robots.txt’yi kontrol ediyor. ClaudeBot ve Claude-SearchBot ortalama gunde 4 kez kontrol ediyor. Bytespider ve CCBot yalnızca robots.txt’yi kontrol edip gercek icerigi hic taramıyor. Ancak GPTBot ve Meta-WebIndexer, en aktif tarayıcılar arasında olmalarına ragmen robots.txt’yi hic kontrol etmiyor. ChatGPT-User da robots.txt’yi hic kontrol etmiyor.
Herhangi bir yapay zeka botu llms.txt dosyasını istiyor mu?
Hayır. 48 gun boyunca 12.099 bot istegi arasında hicbir yapay zeka botu /llms.txt veya /llm.txt dosyasını istemedi. llms.txt’yi kontrol eden tek bot, bir yapay zeka platformu degil, bir web analiz sirketi olan Dataprovider.com oldu. llms.txt’nin bir standart olarak tartısılmasına ragmen, su anda hicbir yapay zeka tarayıcısı pratikte bunu aramıyor.
GPTBot ile ChatGPT-User arasındaki fark nedir?
GPTBot, OpenAI’ın egitim ve indeksleme tarayıcısıdır. Sayfaları, dil varyantlarını ve gorselleri yogun anlık patlamalar halinde sistematik olarak tarar, cogu zaman robots.txt’yi kontrol etmez. ChatGPT-User ise gercek bir kisi ChatGPT sohbetine bir URL yapıstırdıgında tetiklenir. ChatGPT-User 923 istek icin 584 benzersiz IP’ye sahipti (neredeyse 1:1), bu da bireysel kullanıcı oturumlarını dogruluyor. ChatGPT-User yalnızca HTML metin ceker, asla gorsel, CSS veya JS cekmez. GPTBot tum varlık turlerini ceker.
Web sitenizdeki yapay zeka bot trafigini nasıl tespit edebilirsiniz?
Yapay zeka bot trafigi, Google Analytics gibi istemci taraflı analiz araclarında gorunmezdir cunku botlar JavaScript calistırmaz. Alanınıza gelen ham HTTP isteklerini yakalayan sunucu taraflı istek gunlugu kaydına ihtiyacınız var. Bu kayıt, GPTBot, ChatGPT-User, ClaudeBot ve diger botları tanımlayan User-Agent basligını da icerir. WISLR AI Visibility Dashboard bu duzeyde gorunurlugu hazır olarak sunar.
Hangi yapay zeka botları cok dilli icerigi en agresif sekilde tarıyor?
Meta-WebIndexer, tarama butcesinin %79,8’ini dil varyantlarına harcayarak en agresif cok dilli tarayıcı konumunda. GPTBot %61,5 ile onu takip ediyor ve makalelerin 11 dil surumunun tamamını tarıyor. Bingbot (%60,3) ve PerplexityBot (%52,9) da cok dilli icerigi yogun sekilde hedefliyor. Googlebot yalnızca %10,4 ile belirgin sekilde daha az cok dilli. ChatGPT-User’ın dusuk %4,7 oranı, insan kullanıcıları tarafından yonlendirildigini, otomatik tarama olmadıgını yansıtıyor.