Skip to main content

OpenAI menghantar botnya untuk mengambil jauh lebih sedikit halaman.Kami mengesahkan isyaratnya. Kini kami membuat hipotesis tentang sebabnya. Sementara itu, audiens anda tidak ke mana-mana.

Crawler OpenAI mengambil jauh lebih sedikit halaman, dan jika angka bot AI anda runtuh sekitar 20 Ogos 2026, ia bukan salah laman anda. Antara 19 dan 21 Ogos, pengambilan halaman oleh crawler OpenAI yang dikenali jatuh kira-kira tiga suku pada setiap laman yang kami ukur, dan kekal rendah. Pada hari-hari yang sama, orang yang tiba dari ChatGPT bergerak dalam angka satu digit. Alat yang membaca log anda untuk aktiviti bot AI menunjukkan keseluruhan penurunan itu, dan tiada satu pun daripadanya ialah penalti ke atas laman anda. Ini merangkumi apa yang berubah, mengapa ia berlaku, bagaimana kami menolak kemungkinan crawler yang dinamakan semula, dan bagaimana membaca angka anda sendiri kini setelah pengambilan dan ketibaan berpisah.

Dua laluan tanah liat menuju ke pintu sebuah kedai: di sebelah kiri, tiga kurier robot tumbang mengiring dengan kertas mereka bertaburan di sekelilingnya, dan di sebelah kanan, barisan orang yang tidak putus masih berjalan masuk
Versi ringkas
  1. Pengambilan oleh crawler jatuh kira-kira 74%. Orang yang tiba dari ChatGPT bergerak dalam angka satu digit. Hari yang sama, laman yang sama. Antara 19 dan 21 Ogos 2026, pengambilan halaman oleh crawler OpenAI yang dikenali jatuh kepada kira-kira satu suku daripada tahap sebelumnya dan kekal di situ sepanjang lapan belas hari yang kami perhatikan. Ketibaan dari ChatGPT pada hari yang sama bergerak sebanyak yang siri ini memang bergerak, berayun 8.7% secara purata antara tempoh biasa lebih awal pada musim panas. Kedua-dua angka itu bergerak seiring selama berbulan-bulan, dan dalam satu hujung minggu ia berpisah.
  2. Alat pengambilan bot menunjukkan cenuram itu. Penjejak prompt dan alat ketibaan tidak, dan memang tidak boleh. Alat yang membaca analitik bot CDN anda atau log pelayan anda mengira permintaan crawler, jadi ia menangkap keseluruhan penurunan itu. Penjejak prompt bertanya soalan kepada pembantu dan merekodkan sama ada anda dinamakan, jadi perubahan dalam pengambilan tidak dapat sampai kepadanya. Laporan ketibaan mengira orang, dan orang itu terus datang. Tiga produk, tiga kuantiti, satu daripadanya bergerak.
  3. Penurunan itu benar. Ia bukan pepijat pelaporan. Ia berulang di laman berasingan yang menjalankan pangkalan kod berbeza, ia muncul dalam log edge mentah tanpa pengelas dalam laluannya, dan jumlah log harian itu sendiri langsung tidak berganjak. Laman kedua, diukur secara bebas, menunjukkan penurunan kira-kira 75%.
  4. Ia juga bukan pembersihan cermin dikikis dari minggu sebelumnya. Itu peristiwa berasingan pada 14 Ogos, selesai menjelang 16hb. Pengambilan yang menyentuh salinan cermin adalah di bawah 2% daripada jumlah pada kedua-dua belah perubahan, dan bahagiannya naik sedikit selepas itu dan bukannya turun. Dua perkara yang tidak berkaitan mendarat dalam masa seminggu antara satu sama lain.
  5. Puncanya kelihatan seperti query fan-out yang berkurang, bukan caching yang lebih ketat. Pengambilan bagi setiap halaman jatuh 47% dan bilangan halaman berbeza yang diambil jatuh 53%, bersama-sama. Caching yang lebih ketat akan mengecilkan kekerapan sambil membiarkan set halaman itu lebih kurang utuh. Mencapai lebih sedikit sumber bagi setiap soalan mengecilkan kedua-duanya, dan itulah yang berlaku. Akhbar perdagangan mengaitkan perubahan itu dengan pemotongan query fan-out ChatGPT Search, dan tiada pengumuman pihak pertama, jadi punca yang dinamakan itu ialah laporan orang lain dan bukan fakta yang mantap.
  6. Penurunan dalam laporan bot berasaskan log bukanlah penalti. Alat yang membaca log anda untuk aktiviti crawler AI, termasuk Profound dan Searchable, mengira berapa kerap crawler OpenAI meminta halaman anda. Penurunan yang ditunjukkannya pada Ogos mencerminkan perubahan pada kekerapan OpenAI meminta, bukan penilaian terhadap laman anda. Ia mendarat di setiap laman yang kami ukur dalam tiga hari yang sama, dan sebuah laman yang jauh lebih besar dilaporkan turun 86% pada minggu yang sama.
  7. Tiada apa-apa dinamakan semula, dan itu berbaloi disemak sebelum apa-apa daripada ini dicetak. Crawler yang dilabel semula akan menghasilkan bukti yang serupa, jadi semakan itu terpaksa mengelak nama. Dengan mengira permintaan dari julat IP crawler OpenAI yang diterbitkan dan bukan mengikut user agent, penurunan itu masih ada pada 63%, tanpa sebarang user agent asing antaranya. Trafik itu memang tidak tiba.

Anda membuka laporan bot AI anda pada awal September dan ada cenuram di dalamnya. Sekitar 20 Ogos, satu garis yang mendaki sepanjang tahun jatuh tiga suku dan tidak pernah kembali. Mungkin ia sampai kepada anda melalui analitik bot CDN anda, mungkin melalui alat keterlihatan berasaskan log, mungkin dalam papan pemuka yang dihantar agensi anda.

Anda bukan seorang sahaja, dan ia bukan salah laman anda. Cenuram yang sama mendarat di setiap laman yang kami ukur, pada tiga hari yang sama, dan sebuah lagi yang kami semak secara bebas menunjukkannya juga.

Namun papan pemuka anda hanya menunjukkan separuh daripada apa yang berlaku. Pada hari-hari yang sama itu, bilangan orang yang tiba dari ChatGPT bergerak dalam angka satu digit. Tiada sesiapa berhenti datang. Dua angka yang bergerak seiring selama berbulan-bulan berpisah dalam satu hujung minggu, dan alat yang mengira aktiviti crawler hanya menunjukkan kepada anda angka yang jatuh.

Selebihnya ialah apa yang berubah, mengapa ia berlaku, dan bagaimana membaca angka anda kini setelah kedua-duanya berpisah.

Apa yang berubah

Antara 19 dan 21 Ogos 2026, pengambilan halaman oleh crawler OpenAI yang dikenali jatuh kepada kira-kira satu suku daripada tahap sebelumnya dan kekal di situ. Setiap laman yang kami analisis menunjukkannya. Sebuah lagi, diukur secara bebas daripada log edge mentah, menunjukkan penurunan kira-kira 75%.

Penurunan itu mengambil masa dua hari, dan tahapnya bertahan sepanjang lapan belas hari berikutnya
Pengambilan halaman oleh crawler OpenAI setiap hari, diindeks kepada tahap sebelum 20 Ogos 2026 yang ditetapkan pada 100.
0 25 50 75 100 18 Ogos: 108 berbanding 100 sebelum 20 Ogos 18 Ogos 108 19 Ogos: 106 berbanding 100 sebelum 20 Ogos 19 Ogos 106 20 Ogos: 39 berbanding 100 sebelum 20 Ogos 20 Ogos 39 21 Ogos: 27 berbanding 100 sebelum 20 Ogos 21 Ogos 27 22 Ogos hingga 8 Sep: 26 berbanding 100 sebelum 20 Ogos 22 Ogos hingga 8 Sep 26

Titik terakhir ialah purata harian merentas baki tempoh itu dan bukannya satu hari, kerana angka itu hampir tidak bergerak setelah ia mendarat.

Keseluruhan penurunan itu mengambil masa dua hari, dan lapan belas hari selepasnya duduk rata pada tahap baharu. Sesuatu gangguan pasti sudah pulih menjelang waktu itu.

Apa yang tidak berubah

Orang yang tiba dari ChatGPT terus tiba. Pada hari yang sama yang mengambil tiga suku daripada angka crawler, ketibaan bergerak dalam angka satu digit.

Apa yang setiap angka lakukan selepas 20 Ogos 2026
Setiap ukuran diindeks kepada tahapnya sendiri sebelum tarikh itu, ditetapkan pada 100. Laman yang sama, hari yang sama.
0 25 50 75 100 Tahap sebelum 20 Ogos Pengambilan oleh crawler OpenAI Pengambilan oleh crawler OpenAI: jatuh kepada kira-kira satu suku daripada tahap sebelum 20 Ogos 26 Orang yang tiba dari ChatGPT Orang yang tiba dari ChatGPT: dua pengukuran bebas meletakkannya antara 92 dan 96 Orang yang tiba dari ChatGPT: sekurang-kurangnya 92 berbanding tahap 100 sebelum 20 Ogos 92 hingga 96

Angka ketibaan diukur dua kali melalui laluan berbeza dan kedua-dua larian mendarat beberapa mata berbeza, jadi ia dicetak sebagai julat yang dirangkumi kedua-duanya dan bukannya satu angka tunggal. Angka crawler ialah tahap berterusan sepanjang lapan belas hari berikutnya.

Siri ini bising. Merentas tempoh setanding lebih awal pada musim panas tanpa peristiwa yang diketahui di dalamnya, pengukuran yang sama berayun 8.7% secara purata antara tempoh biasa, dan mencapai 18.8%. Pergerakan satu digit ialah perkara yang memang dilakukannya. Pergerakan 74% bukan.

Angka crawler jatuh dari cenuram sementara angka ketibaan melakukan sesuatu yang siri ini lakukan hampir setiap bulan. Ketibaan itu ialah orang. Setiap seorang daripada mereka membaca jawapan, mengetik pautan di dalamnya, dan mendarat di laman itu, dan merekalah sebabnya anda mengambil berat tentang dipetik.

Mengapa kami fikir ia berlaku

Dua perkara jatuh bersama: bilangan kali setiap halaman diambil, turun 47%, dan bilangan halaman berbeza yang diambil langsung, turun 53%.

Pasangan itu menolak penjelasan pertama yang dicapai kebanyakan orang. Jika sesebuah sistem melakukan caching halaman anda dengan lebih ketat, menyemak semula salinan yang sudah dipegangnya, anda akan menjangka ia mengambil halaman yang sama dengan lebih jarang sambil masih menyentuh set halaman yang lebih kurang sama. Setnya mengecil sebanyak kekerapannya mengecil. Caching semata-mata tidak menghasilkan itu.

Mengurangkan query fan-out menghasilkannya. Apabila anda bertanya sesuatu kepada ChatGPT Search, soalan itu dikembangkan menjadi beberapa sub-pertanyaan, dan setiap satu pergi menarik sumbernya sendiri. Potong bilangan sub-pertanyaan dan anda mencapai lebih sedikit sumber, setiap satunya dengan lebih jarang, iaitu kedua-dua angka di atas bergerak bersama.

Laporan di tempat lain dalam akhbar perdagangan mengaitkan perubahan Ogos itu dengan perkara tersebut, iaitu pengurangan query fan-out ChatGPT Search. Kami tidak melihat sebarang pengumuman pihak pertama daripada OpenAI, jadi anggap punca yang dinamakan itu sebagai laporan orang lain dan bukan fakta yang mantap. Apa yang boleh kami tunjukkan kepada anda ialah bentuk yang diukur, dan ia sepadan.

Laporan yang sama meletakkan penurunan Reddit pada 86%. Diletakkan bersebelahan kira-kira 73% dan 57% pada dua laman yang kami ukur, ia mencadangkan perkara ini mendarat secara meluas dan bukan pada mana-mana jenis laman tertentu.

Bagaimana kami menyemak bahawa trafik itu milik OpenAI

Sesebuah crawler memberitahu pelayan anda perisian apa dirinya. Nama itu sahaja yang memisahkan permintaan OpenAI daripada permintaan orang lain, dalam log anda dan dalam log kami, dan itulah titik lemah di bawah segala yang di atas.

Penamaan semula akan menghasilkan bukti yang serupa. Jika OpenAI diam-diam melabel semula sebuah crawler, atau memindahkan kerja ini kepada ejen yang tiada sesiapa kaitkan kembali dengan OpenAI, anda akan melihat perubahan global, dalam satu tetingkap 48 jam, di setiap laman, merentas pangkalan kod berbeza, jelas kelihatan dalam log mentah. Tepat seperti yang kami lihat.

Oleh itu semakan itu terpaksa mengelak nama sama sekali. OpenAI menerbitkan julat IP tempat crawler-nya beroperasi. Dengan mengira permintaan dari julat tersebut dan bukan mengikut user agent, penurunan itu masih ada, pada 63%, dan tiada user agent asing bersembunyi di dalamnya. Tiada apa-apa dinamakan semula. Trafik itu memang tidak tiba.

Itulah satu-satunya alternatif yang akan memaksa penarikan balik, dan ia sudah mati.

Apa lagi yang ia bukan

Dua lagi penjelasan timbul semasa analisis dan kedua-duanya dibunuh. Kedua-duanya ada di sini kerana mana-mana satu daripadanya akan menghasilkan cerita yang lebih kemas daripada yang sebenar, dan kerana anda mungkin sedang mencapai salah satu daripadanya tentang data anda sendiri.

  • Pepijat pelaporan. Penurunan itu ada dalam log mentah yang dinyahpengenalan tanpa sebarang pengelas dalam laluannya. Laman yang terlibat menjalankan pangkalan kod berbeza, dan salah satunya tiada apa-apa yang dilancarkan sepanjang tetingkap itu. Kiraan fail log mentah setiap hari langsung tidak bergerak.
  • Perubahan kod di pihak kami. Satu pelancaran mendarat pada waktu yang sangat kebetulan pada 19 Ogos. Seseorang membangkitkannya sebagai punca yang mungkin dan kemudian menariknya balik, kerana baris yang disentuhnya tidak boleh membawa nilai yang dikira metrik ini. Masa yang kebetulan bukan bukti.
  • Pembersihan cermin yang dikikis. Salinan laman ini telah dikikis dan diterbitkan semula di tempat lain, dan itu dibersihkan sekitar masa yang sama. Ia memuncak pada 14 Ogos dan selesai menjelang 16hb. Pengambilan yang menyentuh laluan bercermin adalah di bawah 2% daripada jumlah pada kedua-dua belah perubahan, dan bahagiannya naik sedikit selepas itu dan bukannya turun.

Dua perkara yang tidak berkaitan mendarat dalam masa seminggu antara satu sama lain. Mana-mana penjelasan tunggal yang meliputi kedua-duanya sudah salah sebelum anda bermula.

Alat AI anda mengira satu daripada tiga perkara berbeza

Sebelum anda boleh membaca angka anda sendiri, anda perlu tahu yang mana antaranya yang anda pegang. Pasaran pengukuran AI menjual tiga produk berbeza dan menerangkan ketiga-tiganya dengan bahasa yang lebih kurang sama. Ketiga-tiganya memerhati perkara berbeza.

Apa yang diperhati alat anda Bagaimana ia mendapat angkanya Apa yang ia tunjukkan pada Ogos 2026
Penjejakan prompt, atau bahagian suara Mengemukakan satu set soalan kepada pembantu mengikut jadual dan merekodkan sama ada jenama anda dinamakan Tiada apa-apa, mengikut binaannya. Ia tidak pernah mengira permintaan crawler
Aktiviti bot AI, daripada analitik bot CDN atau log pelayan Mengira permintaan dari crawler AI, dikenal pasti melalui nama yang diberikan perisian itu Keseluruhan penurunan kira-kira tiga suku
Ketibaan dari pembantu Mengira orang yang mengetik pautan dalam sesuatu jawapan dan mendarat di laman anda Garis biasa

Jika anda memerhati perkara ini melalui Profound, Searchable, atau alat lain yang membaca log anda untuk aktiviti bot AI, penurunan di hadapan anda itu bukan penalti. Tiada apa-apa yang menurunkan taraf laman anda, dan tiada apa-apa yang anda lakukan menyebabkannya. Alat itu mengira berapa kerap crawler OpenAI meminta halaman anda, dan OpenAI mengubah kekerapan ia meminta. Penurunan yang sama mendarat di setiap laman yang kami ukur, dalam tiga hari yang sama, dan sebuah laman yang jauh lebih besar dilaporkan turun 86% pada minggu itu. Perubahan menyeluruh dalam kelakuan pengambilan menghasilkan tepat bentuk ini dalam laporan berasaskan log, dan ia tidak mengatakan apa-apa tentang kedudukan anda.

Penjejak prompt tidak boleh menunjukkan peristiwa ini kepada anda. Perubahan pada kekerapan halaman anda diambil tiada laluan masuk ke dalam angka yang dibina daripada jawapan. Itu kenyataan tentang cara instrumen itu berfungsi dan bukan penemuan: kami tidak mengukur keterlihatan di sebelah jawapan pada Ogos, dan artikel ini tidak mendakwa ia bertahan atau jatuh.

Alat yang memang menunjukkannya sedang membaca aktiviti crawler, dan ia melaporkan angka itu dengan betul. Masalah bermula dengan apa yang orang fahamkan daripadanya. Beritahu seorang pemilik kedai bahawa petikan AI mereka jatuh 74% pada Ogos dan anda telah memberitahu mereka sesuatu yang benar tentang satu metrik dan palsu tentang pelanggan mereka.

Bagaimana membaca angka baharu anda

  • Tarik tarikh yang sama daripada laporan yang mengira orang dan bukan permintaan. Penurunan bertangga kira-kira tiga suku pada minggu 20 Ogos 2026 yang duduk bersebelahan garis ketibaan yang biasa ialah peristiwa ini, dan ia bukan audiens yang hilang.
  • Tanya mana-mana alat yang menyebut petikan, kuantiti mana yang dimaksudkannya. Pengambilan dan ketibaan kedua-duanya dipanggil begitu, dan pada laman yang sama dalam bulan yang sama kedua-duanya berbeza mengikut urutan magnitud.
  • Anggap 20 Ogos sebagai pemutus dalam siri itu dan bukan penurunan. Membandingkan September dengan Julai pada kiraan pengambilan kini mengukur dua kelakuan berbeza, jadi angka tahun ke tahun dan bulan ke bulan anda pada metrik itu akan kekal salah sehingga setahun penuh berlalu.
  • Kekalkan papan pemuka bot untuk apa yang ia lakukan dengan baik, iaitu memberitahu anda sama ada halaman anda boleh dicapai dan dibaca langsung. Nilai saluran itu sendiri berdasarkan ketibaan, dan berdasarkan apa yang dibeli oleh ketibaan tersebut.

Ogos 2026 berfungsi sebagai ujian ke atas apa jua pengukuran AI yang anda bergantung padanya. Alat mana pun yang menunjukkan kepada anda keruntuhan pada bulan itu sedang melaporkan kelakuan crawler, dan kini anda tahu apa yang sepatutnya ditunjukkan oleh alat di sebelahnya.

FAQs

Papan pemuka bot AI saya jatuh 70% pada Ogos. Adakah saya kehilangan keterlihatan?

Tidak, berdasarkan bukti yang kami ada. Orang yang tiba dari ChatGPT di laman yang kami analisis bergerak dalam angka satu digit merentas perubahan yang sama, dalam siri yang memang berayun 8.7% secara purata antara tempoh biasa. Papan pemuka bot mengira permintaan crawler dan bukan pelanggan, jadi penurunan padanya memberitahu anda sesuatu tentang crawling. Semak laporan ketibaan untuk tarikh yang sama sebelum anda menganggapnya sebagai audiens yang hilang.

Adakah OpenAI berhenti melakukan crawling ke atas web pada Ogos 2026?

Ia mengambil jauh lebih sedikit halaman, dan itu bukan sama dengan berhenti. Permintaan yang membawa nama crawler OpenAI yang dikenali jatuh kira-kira tiga suku antara 19 dan 21 Ogos 2026 dan kekal rendah. Kerana crawler yang dinamakan semula akan kelihatan serupa, penurunan itu disemak semula dengan mengira permintaan dari julat IP crawler OpenAI yang diterbitkan dan bukan mengikut nama: ia masih ada, pada 63%, tanpa sebarang user agent asing antaranya. Trafik itu memang tidak tiba.

Adakah ini menjejaskan penjejakan prompt atau alat bahagian suara saya?

Tidak, mengikut binaannya. Alat itu mengemukakan satu set soalan kepada pembantu mengikut jadual dan merekodkan sama ada jenama anda dinamakan dalam jawapan, dan itu tidak pernah melibatkan pengiraan permintaan crawler, jadi perubahan dalam pengambilan tidak boleh muncul padanya. Kami tidak mengukur sama ada keterlihatan di sebelah jawapan bergerak pada Ogos dan kami tidak mendakwa ia bergerak atau tidak. Intinya ialah kedua-dua produk mengukur perkara berbeza, dan hanya satu daripadanya mempunyai cenuram.

Apa bezanya antara pengambilan oleh crawler dan rujukan?

Pengambilan oleh crawler ialah perisian sesebuah syarikat AI meminta halaman daripada pelayan anda, tanpa sesiapa terlibat, dan satu halaman boleh diambil berkali-kali dalam sebulan. Rujukan ialah seseorang yang membaca jawapan, mengetik pautan di dalamnya, dan mendarat di laman anda. Yang pertama memberitahu anda berapa kerap mesin membaca halaman anda. Hanya yang kedua mengira pelanggan.

Bagaimana saya tahu kuantiti mana yang dikira alat saya?

Lihat apa yang angka itu lakukan sekitar 20 Ogos 2026. Alat yang mengira pengambilan oleh crawler menunjukkan penurunan bertangga kira-kira tiga suku pada minggu itu. Alat yang mengira ketibaan manusia menunjukkan garis biasa. Jika alat anda memanggil angkanya petikan, tanya yang mana antara kedua-duanya dimaksudkan, kerana perkataan itu digunakan untuk kedua-duanya dan pada laman yang sama dalam bulan yang sama kedua-duanya berbeza mengikut urutan magnitud.

Mungkinkah ini perubahan pada cara crawler mengenal pasti dirinya dan bukannya crawling yang berkurang?

Itulah alternatif yang jelas dan ia telah ditolak. Penamaan semula meramalkan segala yang kami lihat, jadi semakan itu terpaksa mengelak nama: dengan mengira permintaan dari julat IP crawler OpenAI yang diterbitkan dan bukan mengikut user agent, penurunan itu masih hadir pada 63%, dan tiada user agent asing muncul dalam julat tersebut. Tiada apa-apa dilabel semula.

Adakah laman saya sedang dihukum atau diturunkan taraf oleh OpenAI?

Tiada apa-apa dalam peristiwa ini yang merupakan penilaian terhadap mana-mana laman secara individu. Penurunan itu mendarat di setiap laman yang kami ukur dalam tiga hari yang sama, pada pangkalan kod yang berbeza, dan sebuah laman yang jauh lebih besar dilaporkan turun 86% pada minggu yang sama. Apa yang berubah ialah kekerapan crawler OpenAI meminta halaman secara menyeluruh. Alat yang membaca log anda untuk aktiviti bot, seperti Profound atau Searchable, melaporkan perubahan itu dengan betul, dan ia tidak membawa maklumat tentang kedudukan atau ranking anda.

Mengapa OpenAI mengambil lebih sedikit halaman?

Pengukuran menunjuk kepada mencapai lebih sedikit sumber bagi setiap soalan dan bukannya caching halaman dengan lebih ketat. Pengambilan bagi setiap halaman jatuh 47% dan bilangan halaman berbeza yang diambil jatuh 53%, dan kedua-duanya jatuh bersama. Caching yang lebih ketat akan memotong kekerapan halaman yang sama disemak semula sambil membiarkan set halaman itu lebih kurang utuh. Akhbar perdagangan mengaitkan perubahan itu dengan OpenAI mengurangkan query fan-out ChatGPT Search, dan itu sepadan dengan bentuk tersebut, walaupun tiada pengumuman pihak pertama, jadi anggap punca yang dinamakan itu sebagai laporan dan bukan fakta yang muktamad.