搜索与 SEO
抓取
Crawling
自动程序发现网址并请求页面或资源的过程。抓取取得的可能是初始 HTML、渲染后的内容或其他格式；不同程序的目的和执行能力需要分别确认。
举个例子
普通浏览器能在登录后看到价格表，而未登录抓取只得到提示页。服务器成功返回 200，也不能说明抓取程序实际取得了正文。
与 GEO 的关系
排查应检查请求状态、重定向、访问控制和可解析正文，再结合日志及平台工具。训练抓取、搜索抓取与用户触发访问可能使用不同控制项。
适用边界
被抓取不等于已索引，更不等于被某次答案引用。不能笼统说所有 AI 都不执行 JavaScript，或放开一种机器人就能影响所有产品。
参考资料
© 2026 NiubiGEO。原创文章与图示未经书面授权禁止转载、复制、改编或用于商业发布，法律另有规定或另有授权的除外。第三方资料的权利归其权利人所有。本声明不改变开源软件许可证。