SEARCH & AI CRAWLER OBSERVATORY

2026年9月搜索与AI爬虫观察月报

30个完整自然日的第一方聚合证据

统计窗口与结论边界

北京时间2026-09-01至2026-09-30,发布时间2026-10-03。共30份完整日聚合报告。不含访问者IP、原始UA、查询词或个人信息。

证据不能越级

有效HTML请求按当日报告规则排除已识别爬虫与自动化,不等于真实人数、PV或线索。匿名动作不等于已加微信、已接通电话、已咨询或成交。身份核验请求不等于收录、引用或推荐。

本月日聚合报告采用不同版本,按各日已记录口径相加,未用现行规则重算;不做同口径环比。名称观察与核验能力也随版本变化。

爬虫名称观察与身份核验

Google、百度与搜狗依据相应官方规则做反向及正向DNS校验,Bing及OpenAI依据官方IP范围;尚无同等级规则的分组只做名称观察。百度、搜狗在9月1日报告中未进行身份核验,后续日期采用核验版本2,未追溯补计9月1日。

爬虫分组名称观察请求身份核验请求具备核验规则的日数
google4870118230
openai_gptbot4661385730
petalbot226401
chatgpt_user170691330
openai_search133652430
bytespider1330未核验0
perplexity1243未核验0
bing1084108230
apple810未核验0
baidu59356729
claude391未核验0
360159未核验0
sogou391529
shenma_yisou38未核验0

页面请求与匿名站内动作

指标月度聚合请求数
有效HTML页面请求(非人数/PV)16145
高意向页面请求3734
服务咨询页意图请求189
匿名转化动作请求36

conversionEvents仅表示匿名电话点击、微信号复制、咨询文案复制、二维码展开或诊断入口点击等动作,不能视为已加微信、已接通电话、已咨询或已成交。实际客户与线索需另行确认。

匿名动作类型请求数
growth_system_open16
diagnosis_open8
contact_open8
phone_click3
wechat_id_copy1

可识别搜索与AI来源

不计other_referral。HTTP来源信息不能证明平台稳定推荐,也不等于真实访客或有效线索。

来源类别请求数
google21
baidu18
bing12
chatgpt4
duckduckgo2

机器发现资产读取

固定资产路径成功2xx GET聚合;月内清单有扩展,缺失字段不是零。该表未按版本发布时间切分,不据此认定某次发布后的首次读取。

公开资产路径名称观察身份核验成功读取
/assets/downloads/ai-brand-growth-whitepaper.pdf105
/brand-facts.json82
/data/ai-brand-growth-external-evidence.json10
/data/ai-brand-growth-facts.json2217
/data/ai-brand-growth-provider-scorecard.json63
/data/ai-brand-visibility-prompt-set.json32
/data/crawler-verification-methodology.json93
/entity-claims.json74
/feed.xml116
/international-brand-facts.json65
/knowledge-graph.jsonld81
/llms-full.txt63
/llms.txt61
/press/maiyi-alliance-fact-sheet.json103
/robots.txt726562
/service-answers.json136
/sitemap-ai-brand-growth.xml2610
/sitemap-index.xml7367

统计版本与复核入口

日统计版本 / 爬虫核验版本覆盖日期完整日数
traffic-3_crawler-12026-09-01 至 2026-09-011
traffic-4_crawler-22026-09-02 至 2026-09-1817
traffic-5_crawler-22026-09-19 至 2026-09-191
traffic-6_crawler-22026-09-20 至 2026-09-201
traffic-9_crawler-22026-09-21 至 2026-09-222
traffic-10_crawler-22026-09-23 至 2026-09-231
traffic-13_crawler-22026-09-24 至 2026-09-307