GEO 的技术检查主要看五项:robots.txt 是否误拦了搜索引擎和 AI 平台的爬虫;重要内容是否直接写在页面 HTML 中,而不是只放在图片里或依赖脚本加载;站点地图是否包含全部重要页面;企业、服务、文章和常见问题是否有准确的结构化数据;是否提供 llms.txt 这类辅助索引。前四项是基础,llms.txt 可以作为补充。
一、爬虫能不能进来
先打开网站的 robots.txt(在域名后加 /robots.txt),检查有没有误拦。常见的问题是建站时为了测试写了“全部禁止抓取”,上线后忘了改。
一些 AI 平台公开了自己的爬虫名称和控制方式,例如 OpenAI 说明了 GPTBot 等爬虫的用途和屏蔽方法。企业可以按自己的意愿决定是否允许,但要清楚:完全屏蔽后,这些平台可能无法直接读取官网内容。
还要检查服务器、防火墙或 CDN 是否对陌生访问拦得过严,导致爬虫只能拿到错误页面。
二、内容是不是写在页面里
有些网站的主要内容是图片,比如把服务介绍做成一张长图;有些页面的文字要等脚本运行后才加载。对人来说看起来一样,但部分爬虫只能读到很少的文字。
检查方法:在浏览器里查看网页源代码,看服务说明、常见问题等关键文字是否直接出现在 HTML 中。重要信息用文字写,图片配上说明性的替代文本。
三、站点地图是否完整
站点地图(sitemap.xml)告诉爬虫网站有哪些页面。检查它是否包含全部服务页、文章和案例页,是否还残留已经删除的旧网址,页面的更新时间是否准确。
四、结构化数据是否准确
结构化数据是写在页面里的一段标准格式说明,用来告诉机器“这是一家公司”“这是一项服务”“这是一篇文章”。常用的类型包括:
- Organization / LocalBusiness:公司名称、网址、联系方式、地址;
- Service:服务名称、说明和提供方;
- Article:文章标题、发布时间和更新时间;
- FAQPage:页面上的问答内容。
结构化数据必须和页面上看得到的内容一致,不能写页面上没有的信息。可以用搜索引擎提供的测试工具检查格式是否正确。
五、llms.txt 怎么看
llms.txt 是一种提议中的约定:在网站根目录放一个文本文件,用简洁的格式列出网站的主要页面和说明,方便 AI 工具快速了解网站。它的制作成本很低,本站也提供了一份。
需要注意的是,它目前还不是各平台普遍承诺支持的标准,不能替代前面四项基础工作,也不应该在里面写页面上没有的内容。
检查之后
技术问题通常一次修好就能长期受益。建议在网站改版、更换服务器或调整 CDN 之后,按这份清单重新检查一遍。
常见问题
要不要屏蔽 AI 爬虫?
取决于企业自己的考虑。如果希望 AI 能准确介绍企业,通常应允许它们读取公开的官网内容;付费内容或不希望被使用的资料,可以针对相应目录单独屏蔽。
没有技术人员能做这些检查吗?
robots.txt、站点地图和网页源代码都可以在浏览器里直接查看,基础检查不需要写代码。发现问题后,再交给建站服务商或技术人员修改。
结构化数据写得越多越好吗?
不是。结构化数据要准确反映页面内容;写了页面上没有的信息,或者把普通文章标成问答,反而可能被判定为不当标记。
参考资料
把方法放进一项具体工作。
越来越多客户会先问豆包、DeepSeek、腾讯元宝、Kimi 等 AI 助手,再决定联系谁。远行者科技提供 GEO(生成式引擎优化)服务:先测出企业在 AI 回答中的现状,再整理官网和公开资料,让 AI 更容易找到、读懂并准确引用企业信息,并按固定问题清单定期复测。



