待验证50% 置信事实精确时间
AI 搜索爬虫普遍不执行 JavaScript 或只执行非常有限的脚本，它们看到的是服务器返回的初始 HTML；客户端渲染（CSR）的页面正文可能在爬虫眼中是空的。
1
来源数
50%
置信度
中期 (~90 天)
时效性
2026/10/13
首次发现
有效期至：2027/1/11
来源
涉及实体
相关事实
待验证AI爬虫（如GPTBot、ClaudeBot、Common Crawl）采用轻量级HTTP请求+HTML解析方式，不为每个页面启动完整浏览器执行JavaScript76% 相似待验证爬虫程序通过代码向服务器发起HTTP请求，服务器返回原始内容，但爬虫没有浏览器的渲染能力，拿到的是网页的原始HTML源码72% 相似待验证如果页面内容需要JavaScript才能显示，在使用非JS爬虫抓取时无法获取该内容，这本身就是一个发现71% 相似待验证AI爬虫只下载HTML，不执行JavaScript，因此依赖浏览器端JavaScript的网站分析工具无法统计AI爬虫的访问。71% 相似待验证无头浏览器如 Puppeteer 或 Playwright 能完整模拟浏览器环境执行 JavaScript，用于抓取动态渲染内容67% 相似
引用此条事实
Stable URI
https://kongchang.com/claim/1016009API
curl https://kongchang.com/api/v1/knowledge/claims/1016009MCP
get_claim(id=1016009)