AI 抓取优化
网页内容要先保证可被 AI 爬虫抓取。
- 网页内容要发布在公开的互联网上,确保无需登陆即可访问。权重越高,链接结构越完善的网站越好,AI 爬虫抓取越顺畅
- 部分 AI 有私域语料库,也可以针对性发布,比如腾讯元宝将微信公众号作为语料库(微信公众号是屏蔽搜索引擎爬虫的)
- 不要用 robots.txt 屏蔽 AI 爬虫。之前路透社等很多网站为了避免 AI 影响,主动屏蔽了 AI 爬虫的抓取。
- 重要内容不要放在 JavaScript。因为目前 AI 爬虫还无法识别 JavaScript 内容(未来应该能解决)
- 确保定期更新,保证 AI 爬虫可定期访问。尤其是 AI 爬虫的抓取量有限时,会有限抓取活跃、持续运营的网站
你可以看到部分内容跟 SEO 是一致的,下面也是一样。
AI 索引和分析的优化
网页内容要确保被 AI 索引,并便于分析识别。
- 结构化数据仍然重要,甚至更重要。结构化数据可帮助 AI 更好的理解网页主题和内容,建议参考 http://http://schema.org 进行结构化数据的整理,比 Google 有更丰富的字段展示。
- 独特内容也很关键。类似 SEO,有独特内容才有被收录和分析的价值。
AI 曝光和排名的优化
最后一步就是如何增加曝光和点击的可能性。

- 重中之重,就是要瞄准话题,解决用户需求,而不是瞄准关键词,仅关注关键词密度和同义词。这部分在 AI 时期更加重要,原来针对关键词的方法对 AI 不再有效。
- 要保证内容的高质量和原创性,建议参考 Google 提出的 EEAT,即真实体验、专业度、权威度、信任度。
- 对于 Google AIO,要尽量确保原网页的排名靠前。Botify 和 DemandSphere 的调查显示,75% 的 Google AIO 链接来自排名前 12 的网页
AI 在 SEO 的应用
AI 在 SEO 中的应用基本上覆盖了每个方面。在内容和多媒体方面:
- AI 根据关键词生成文章的提纲和正文,如这篇《3种内容策略》中提到的
- AI 产出文案,总结内容,比如生成 meta description、产出产品的核心卖点
- AI 生成图片,以及视频切片、数字人应用
- AI 翻译,比 Google Translate 更流畅
关键词方面:
- AI 可挖掘关键词,比如
“当用户想买充电宝时,在Google里会搜索什么关键词” - AI 可分析关键词类型,挖掘背后的用户需求,比如
“当用户在Google里搜索[如何挑选西瓜]时,最希望了解什么话题”
分析方面:
- 利用 AI 分析网页,可从 SEO 和用户体验角度分析,比如
“这是一个充电宝的产品详情页,如果你是用户,请从用户体验和 SEO 角度进行分析,并给出具体建议”
最后还有 AI 编程,我最近就用 Cursor 搭建了几个 SEO 小工具,只要输入提示就自动生成代码,半天就生成 2, 3个小工具(之后会分享出来)。
未来预测:AI 会取代搜索?
AI 取代传统搜索,已经成为必然,只是产品的发展不会如此简单、生硬。Google 正在融入 AI 功能,吸收 AI 分析和推理的能力,AI 也在加入搜索功能,解决即时信息和准确度的问题。
所以,我预测之后 Google 和 ChatGPT 会越来越接近。Google 可能是一半 AI 一半搜索的形态,比如首页有对话框和搜索框的切换。
© 版权声明
文章版权归作者所有,未经允许请勿转载。
相关文章
暂无评论...