Skip to main content

I bot che eseguono il crawling dello stack agentico di Shopify.

Due mesi di log edge da uno storefront Shopify di ricerca. Microsoft Copilot è l'unico verificatore agentico organico che esegue polling autonomamente, colpendo /.well-known/ucp da Azure first-party settimana dopo settimana. I crawler LLM comuni (GPTBot, ClaudeBot, Bingbot, Googlebot) continuano a recuperare il /pages/llms-txt canonico di Shopify e ignorano ogni file di agent-discovery più recente.

Punti chiave
  1. Microsoft Copilot esegue polling per il manifest UCP autonomamente.
    Microsoft-Commerce-Platform esegue polling su /.well-known/ucp circa settimanalmente da Microsoft Azure.
    Microsoft-Commerce-Platform è la pipeline di ingestione UCP di Microsoft Copilot.
  2. I bot AI non stanno ancora usando i file di agent-discovery più recenti. Nessuno dei crawler LLM comuni (GPTBot, ClaudeBot, Bingbot, Googlebot) ha ancora colpito uno dei path di agent-discovery più recenti: /llms-full.txt, /agents.md o /sitemap_agentic_discovery.xml. Continuano tutti a recuperare il /pages/llms-txt canonico di Shopify.
  3. Google-Extended non ha visitato lo storefront nemmeno una volta. Il bot di opt-out dichiarato da Google per il training AI ha registrato zero hit negli ultimi 60 giorni, su qualsiasi path. Se Gemini sta tirando dati di prodotto Shopify nella sua pipeline di training, non lo sta facendo sotto questo UA. I bot Google che si sono presentati (Googlebot, GoogleOther) sono crawler di ricerca e shopping, non il bot dei dati di training.

Chi c'è e cosa cerca.

Totale dei fetch dei bot LLM nella finestra, insieme a una heatmap bot-per-endpoint. GPTBot, ClaudeBot e Bingbot eseguono doppio fetch su /pages/llms-txt e /a/llms ma ignorano i nuovi file della spec. Solo Microsoft-Commerce-Platform esegue polling su /.well-known/ucp autonomamente.

Totale fetch a 60 giorni per operatore

Tutte le risorse di LLM-discovery combinate
BingbotLLM
93
GPTBotLLM
71
ClaudeBotLLM
28
AmazonbotLLM
13
GoogleOtherLLM
5
OAI-SearchBotLLM
4
Meta-ExternalLLM
3
GooglebotLLM
3
MS-CommerceVRF
3
ApplebotLLM
2
Google-ExtendedLLM
0

Bot × endpoint, 60 giorni

Celle vuote = zero hit. /[locale]/llms-txt aggrega le varianti con prefisso locale che Shopify auto-genera per ogni regione abilitata, es. /en-gb/pages/llms-txt.
  /pages/llms-txt /a/llms /[locale]/llms-txt /llms.txt /llms-full.txt /agents.md /sitemap_agentic /.well-known/ucp
BingbotLLM 50 43 ······
GPTBotLLM 34 31 6 ·····
ClaudeBotLLM 14 14 ······
AmazonbotLLM 13 ·······
GoogleOtherLLM 1 · 4 ·····
OAI-SearchBotLLM 4 ·······
GooglebotLLM 2 · 1 ·····
Meta-ExternalLLM 2 1 ······
MS-CommerceVRF ······· 3
ApplebotLLM 1 1 ······
Google-ExtendedLLM ········

L'unico verificatore agentico organico catturato: Microsoft Copilot.

Microsoft-Commerce-Platform ha eseguito polling su /.well-known/ucp con cadenza circa settimanale dallo spazio Azure first-party di Microsoft. IP, ASN, record PTR e convenzione di naming corrispondono direttamente a Microsoft.

Microsoft-Commerce -Platform
User-Agent: Microsoft-Commerce-Platform/1.0
IP
Tre IP in 4.149.255.0/24
ASN
AS8075 · Microsoft · Azure first-party
Geo
Washington · Seattle / Redmond
CF colo
SEA
Reverse DNS
PTR gestiti da Microsoft
Richieste totali
3 · solo /.well-known/ucp
Cadenza
~settimanale
Evidenze comportamentali
  • ASN Azure first-party di Microsoft (AS8075).
  • Tre IP nel range contiguo 4.149.255.0/24. Pattern di poller di produzione.
  • Tocca solo /.well-known/ucp. Nessuna scansione di prontezza.
  • Cadenza circa settimanale coerente con il polling di refresh delle capability.
  • UA chiamato "Commerce-Platform", in linea con la gamma prodotti Microsoft.

La pipeline di ingestione UCP di Microsoft Copilot. Microsoft ha adottato UCP a NRF 2026 e distribuisce UCP in Copilot Checkout con Shopify, PayPal e Stripe. Il poll settimanale da Azure first-party è il refresh delle capability di produzione, non un probe una tantum.