Skip to main content

De bots die crawlen op Shopify's agentic stack.

Twee maanden edge-logs van een Shopify-onderzoeksstorefront. Microsoft Copilot is de enige organische agentic verifier die zelfstandig polt, met wekelijkse hits op /.well-known/ucp vanuit first-party Azure. De veelvoorkomende LLM-crawlers (GPTBot, ClaudeBot, Bingbot, Googlebot) blijven het Shopify-canonieke /pages/llms-txt ophalen en negeren elk nieuwer agent-discovery-bestand.

Available in: English | Deutsch | Español | Français | हिन्दी | Italiano | Bahasa Melayu | Polski | Português | Türkçe | Українська
Tony Castillo

Tony Castillo

← All research

Belangrijkste inzichten
  1. Microsoft Copilot polt zelfstandig naar het UCP-manifest.
    Microsoft-Commerce-Platform polt /.well-known/ucp ongeveer wekelijks vanuit Microsoft Azure.
    Microsoft-Commerce-Platform is de UCP-ingestiepijplijn van Microsoft Copilot.
  2. AI-bots gebruiken de nieuwere agent-discovery-bestanden nog niet. Geen van de veelvoorkomende LLM-crawlers (GPTBot, ClaudeBot, Bingbot, Googlebot) heeft tot nu toe enig nieuwer agent-discovery-pad geraakt: /llms-full.txt, /agents.md of /sitemap_agentic_discovery.xml. Ze blijven allemaal in plaats daarvan het Shopify-canonieke /pages/llms-txt ophalen.
  3. Google-Extended heeft de storefront geen enkele keer bezocht. Google''s aangekondigde AI-trainings opt-out-bot logde nul hits in de afgelopen 60 dagen, op welk pad dan ook. Als Gemini überhaupt Shopify-productdata in zijn trainingspijplijn trekt, doet het dat niet onder deze UA. De Google-bots die wél verschenen (Googlebot, GoogleOther) zijn search- en shopping-crawlers, geen trainingsdata-bot.

Wie er is, en waar ze op afgaan.

Totaal aantal LLM-bot fetches over het venster, naast een bot-per-endpoint heatmap. GPTBot, ClaudeBot en Bingbot fetchen /pages/llms-txt en /a/llms dubbel maar negeren de nieuwe spec-bestanden. Alleen Microsoft-Commerce-Platform polt /.well-known/ucp zelfstandig.

Totaal aantal fetches per operator over 60 dagen

Alle LLM-discovery-bronnen samen
BingbotLLM
93
GPTBotLLM
71
ClaudeBotLLM
28
AmazonbotLLM
13
GoogleOtherLLM
5
OAI-SearchBotLLM
4
Meta-ExternalLLM
3
GooglebotLLM
3
MS-CommerceVRF
3
ApplebotLLM
2
Google-ExtendedLLM
0

Bot × endpoint, 60 dagen

Lege cellen = nul hits. /[locale]/llms-txt aggregeert locale-prefix-varianten die Shopify automatisch genereert voor elke ingeschakelde regio, bijv. /en-gb/pages/llms-txt.
  /pages/llms-txt /a/llms /[locale]/llms-txt /llms.txt /llms-full.txt /agents.md /sitemap_agentic /.well-known/ucp
BingbotLLM 50 43 ······
GPTBotLLM 34 31 6 ·····
ClaudeBotLLM 14 14 ······
AmazonbotLLM 13 ·······
GoogleOtherLLM 1 · 4 ·····
OAI-SearchBotLLM 4 ·······
GooglebotLLM 2 · 1 ·····
Meta-ExternalLLM 2 1 ······
MS-CommerceVRF ······· 3
ApplebotLLM 1 1 ······
Google-ExtendedLLM ········

De enige organische agentic verifier die we betrapten: Microsoft Copilot.

Microsoft-Commerce-Platform polde /.well-known/ucp in een ongeveer wekelijkse cadans vanuit Microsoft's first-party Azure-ruimte. Het IP, de ASN, de PTR-records en de naamgevingsconventie wijzen allemaal direct naar Microsoft.

Microsoft-Commerce -Platform
User-Agent: Microsoft-Commerce-Platform/1.0
IP's
Drie IP's in 4.149.255.0/24
ASN
AS8075 · Microsoft · 1st-party Azure
Geo
Washington · Seattle / Redmond
CF colo
SEA
Reverse DNS
Door Microsoft beheerde PTRs
Totaal verzoeken
3 · alleen /.well-known/ucp
Cadans
~wekelijks
Gedragsbewijs
  • Microsoft's first-party Azure-ASN (AS8075).
  • Drie IP's in aaneengesloten 4.149.255.0/24. Patroon van een productie-poller.
  • Raakt alleen /.well-known/ucp. Geen readiness-sweep.
  • Ongeveer wekelijkse cadans, consistent met capability-refresh polling.
  • UA heet "Commerce-Platform", overeenkomend met Microsofts eigen productlijn.

De UCP-ingestiepijplijn van Microsoft Copilot. Microsoft heeft UCP geadopteerd op NRF 2026 en levert UCP in Copilot Checkout met Shopify, PayPal en Stripe. De wekelijkse poll vanuit first-party Azure is de productie-capability-refresh, geen eenmalige probe.