Je opende begin september je AI-botrapport en er zit een klif in. Rond 20 augustus daalt een lijn die het hele jaar geklommen was met driekwart en die komt nooit meer terug. Misschien bereikte het je via de botanalyse van je CDN, misschien via een logbaseerde zichtbaarheidstool, misschien in een dashboard dat je bureau opstuurt.
Je bent niet de enige, en het ligt niet aan je site. Dezelfde klif landde op elke site die we hebben gemeten, op dezelfde drie dagen, en een tweede die we onafhankelijk hebben gecontroleerd laat hem ook zien.
Je dashboard laat je alleen de helft zien van wat er gebeurde. Over diezelfde dagen bewoog het aantal mensen dat uit ChatGPT binnenkomt met enkele procenten. Niemand stopte met komen. Twee cijfers die elkaar maandenlang hadden gevolgd liepen in een weekend uit elkaar, en de tools die crawleractiviteit tellen laten je alleen het cijfer zien dat daalde.
De rest hiervan is wat er veranderde, waarom het gebeurde, en hoe je je cijfers leest nu de twee uit elkaar zijn gaan lopen.
Wat er veranderde
Tussen 19 en 21 augustus 2026 vielen de ophaalverzoeken voor pagina’s van de erkende crawlers van OpenAI terug tot ruwweg een kwart van wat ze waren, en daar bleven ze. Elke site die we analyseren laat het zien. Een tweede, onafhankelijk gemeten uit ruwe edge-logs, laat een daling van ongeveer 75% zien.
Het laatste punt is het daggemiddelde over de rest van de periode in plaats van een enkele dag, omdat het cijfer nauwelijks nog bewoog toen het eenmaal geland was.
De hele daling duurde twee dagen, en de achttien dagen erna liggen vlak op het nieuwe niveau. Een storing zou tegen die tijd hersteld zijn.
Wat er niet veranderde
De mensen die uit ChatGPT binnenkomen bleven binnenkomen. Over dezelfde dagen die driekwart van het crawlercijfer afhaalden, bewogen de bezoeken met enkele procenten.
Het bezoekerscijfer is twee keer langs verschillende routes gemeten en de twee runs komen een paar punten uit elkaar uit, dus het staat er als het bereik dat ze bestrijken in plaats van als één getal. Het crawlercijfer is het volgehouden niveau over de achttien dagen die volgden.
Deze reeks is rumoerig. Over een vergelijkbaar stuk eerder in de zomer zonder bekende gebeurtenis erin schommelde dezelfde meting gemiddeld 8.7% tussen gewone periodes, en liep op tot 18.8%. Een beweging van enkele procenten is iets wat ze toch al doet. Een beweging van 74% niet.
Het crawlercijfer viel van een klif terwijl het bezoekerscijfer iets deed wat deze reeks de meeste maanden doet. Die bezoeken zijn mensen. Ieder van hen las een antwoord, tikte op een link erin en belandde op de site, en zij zijn de reden dat je überhaupt geciteerd wilt worden.
Waarom we denken dat het gebeurt
Twee dingen daalden samen: het aantal keren dat elke pagina werd opgehaald, 47% omlaag, en het aantal verschillende pagina’s dat überhaupt werd opgehaald, 53% omlaag.
Dat paar sluit de eerste verklaring uit waar de meeste mensen naar grijpen. Als een systeem je pagina’s harder zou cachen en kopieën zou hercontroleren die het al heeft, zou je verwachten dat het dezelfde pagina’s minder vaak ophaalt terwijl het nog steeds ruwweg dezelfde set pagina’s raakt. De set kromp net zoveel als de frequentie. Caching alleen levert dat niet op.
Query fanout verminderen wel. Als je ChatGPT Search iets vraagt, wordt de vraag uitgeklapt in meerdere subquery’s, die elk hun eigen bronnen ophalen. Beperk het aantal subquery’s en je bereikt minder bronnen, elk minder vaak, en dat zijn allebei de cijfers hierboven die samen bewegen.
Berichtgeving elders in de vakpers schrijft de verandering van augustus precies daaraan toe, een vermindering van de query fanout van ChatGPT Search. We hebben geen aankondiging van OpenAI zelf gezien, dus behandel de genoemde oorzaak als de berichtgeving van iemand anders en niet als een vaststaand feit. Wat we je wel kunnen laten zien is de gemeten vorm, en die past.
Dezelfde berichtgeving zet de daling van Reddit op 86%. Afgezet tegen ruwweg 73% en 57% op de twee sites die we hebben gemeten, wijst dat erop dat dit breed landde en niet op een bepaald soort site.
Hoe we hebben gecontroleerd dat het verkeer van OpenAI was
Een crawler vertelt je server welke software hij is. Die naam is het enige dat de verzoeken van OpenAI van die van iemand anders scheidt, in jouw logs en in de onze, en het is het zwakke punt onder alles hierboven.
Een hernoeming zou identiek bewijs hebben opgeleverd. Als OpenAI stilletjes een crawler opnieuw had gelabeld, of dit werk had verplaatst naar een agent die niemand terugvoert op OpenAI, zou je een wereldwijde verandering zien, binnen één venster van 48 uur, op elke site, over verschillende codebases, duidelijk zichtbaar in ruwe logs. Precies wat we zagen.
De controle moest daarom namen helemaal vermijden. OpenAI publiceert de IP-reeksen waaruit zijn crawlers werken. Als je de verzoeken uit die reeksen telt in plaats van op user agent, staat de daling er nog steeds, op 63%, en zat er geen onbekende user agent in verstopt. Er is niets hernoemd. Het verkeer komt echt niet binnen.
Dat was het ene alternatief dat een rectificatie zou hebben afgedwongen, en het is dood.
Wat het verder niet is
Tijdens de analyse kwamen nog twee verklaringen op en allebei zijn ze gesneuveld. Ze staan hier omdat elk van beide een netter verhaal zou hebben opgeleverd dan de waarheid deed, en omdat je er misschien zelf naar grijpt voor je eigen data.
- Een rapportagefout. De daling staat in ruwe geschoonde logs zonder classificatie ergens in het pad. De betrokken sites draaien op verschillende codebases, en op een ervan is over het hele venster niets uitgerold. De telling van ruwe logbestanden per dag bewoog nooit.
- Een codewijziging aan onze kant. Eén uitrol landde op een heel gelegen uur op 19 augustus. Iemand bracht die naar voren als de waarschijnlijke oorzaak en nam dat daarna terug, omdat de rijen die hij raakt de waarde die deze metriek telt niet kunnen dragen. Gelegen timing is geen bewijs.
- Een opruiming van gescrapete kopieën. Kopieën van deze sites waren gescrapet en elders opnieuw gepubliceerd, en dat is rond dezelfde tijd opgeruimd. Het piekte op 14 augustus en was klaar op de 16e. Ophaalverzoeken die gekopieerde paden raakten waren aan beide kanten van de verandering onder 2% van het totaal, en hun aandeel ging daarna licht omhoog in plaats van omlaag.
Twee ongerelateerde dingen landden binnen een week van elkaar. Elke enkele verklaring die allebei dekt is bij voorbaat fout.
Je AI-tool telt een van drie verschillende dingen
Voordat je je eigen cijfers kunt lezen moet je weten welke ervan je in handen hebt. De markt voor AI-meting verkoopt drie verschillende producten en beschrijft alle drie in ruwweg dezelfde taal. Ze kijken naar verschillende dingen.
| Waar je tool naar kijkt | Hoe hij aan het cijfer komt | Wat hij liet zien in augustus 2026 |
|---|---|---|
| Prompttracking, of share of voice | Legt de assistenten volgens een schema een set vragen voor en noteert of je merk genoemd wordt | Niets, per constructie. Hij telt nooit crawlerverzoeken |
| AI-botactiviteit, uit CDN-botanalyse of serverlogs | Telt verzoeken van AI-crawlers, herkend aan de naam die de software opgeeft | De hele daling van ongeveer driekwart |
| Bezoeken uit assistenten | Telt de mensen die op een link in een antwoord tikten en op je site belandden | Een gewone lijn |
Als je dit volgt via Profound, Searchable, of een andere tool die je logs op AI-botactiviteit leest, is de daling voor je neus geen straf. Niets heeft je site teruggezet, en niets wat je deed heeft het veroorzaakt. Die tools tellen hoe vaak de crawlers van OpenAI om je pagina’s vroegen, en OpenAI veranderde hoe vaak het vraagt. Dezelfde daling landde op elke site die we hebben gemeten, binnen dezelfde drie dagen, en van een veel grotere site werd die week een daling van 86% gemeld. Een systeembrede verandering in ophaalgedrag levert precies deze vorm op in een logbaserapport, en zegt niets over je positie.
Een prompttracker kan je deze gebeurtenis niet laten zien. Een verandering in hoe vaak je pagina’s opgehaald worden heeft geen weg naar een cijfer dat uit antwoorden is opgebouwd. Dat is een uitspraak over hoe het instrument werkt en geen bevinding: we hebben de zichtbaarheid aan de antwoordkant in augustus niet gemeten, en dit stuk beweert niet dat die standhield of daalde.
De tools die het wel lieten zien lazen crawleractiviteit, en ze rapporteerden het cijfer correct. Het probleem begint bij wat mensen erin lezen. Vertel een winkeleigenaar dat zijn AI-citaties in augustus 74% daalden en je hebt hem iets waars over een metriek verteld en iets onwaars over zijn klanten.
Hoe je je nieuwe cijfers leest
- Haal dezelfde datums op uit een rapport dat mensen telt in plaats van verzoeken. Een stap van ruwweg driekwart in de week van 20 augustus 2026 naast een gewone bezoekerslijn is deze gebeurtenis, en het is geen verloren publiek.
- Vraag elke tool die citaties zegt welke grootheid hij bedoelt. Ophaalverzoeken en bezoeken worden allebei zo genoemd, en op dezelfde site in dezelfde maand verschillen ze ordes van grootte.
- Behandel 20 augustus als een breuk in de reeks en niet als een daling. September met juli vergelijken op een ophaaltelling meet nu twee verschillende gedragingen, dus je cijfers per jaar en per maand op die metriek blijven fout tot er een heel jaar voorbij is.
- Houd het botdashboard voor waar het goed in is, namelijk je vertellen of je pagina’s bereikbaar zijn en überhaupt gelezen worden. Beoordeel het kanaal zelf op bezoeken, en op wat die bezoeken kopen.
Augustus 2026 werkt als een test van welke AI-meting je ook gebruikt. Welke tool je die maand ook een instorting liet zien, die rapporteerde over crawlergedrag, en nu weet je wat de tools ernaast je in plaats daarvan hadden moeten laten zien.