标签

无障碍优化对AI爬虫有多大影响?通过对比实验一探究竟

发布时间:2026-07-21 01:48阅读:3

https://www.searchenginejournal.com/how-ai-agents-see-your-website-and-how-to-build-for-them/570443/

不想阅读英文的话,也可以参考另一篇中文资料

https://web.dev/articles/ai-agent-site-ux?hl=zh-cn

文章末尾给出了两个后续操作建议:

认识 WebMCP,这是一项旨在促进网站与代理交互的拟议 Web 标准,并申请加入早期预览计划以便开始测试。

检查无障碍树:借助现有工具确保网站结构层次对机器可读且保持稳定。

WebMCP相关内容我们之前已经讨论过多次,还做过不少实验,而关于无障碍树,我们虽然知道这项技术有用,却一直没有深入研究它究竟有多大价值。

今天与Meta的丁博士谈起这个话题,他建议为什么不通过实验来验证呢?

于是回来搭建了两个外观相同的网站:

https://darksky.yslow.cn/

https://darksky.sou.ac.cn/

它们唯一的区别在于是否进行了信息无障碍优化,对比一下网页源代码:

人类浏览几乎看不出差别,但AI通过无障碍树获取的内容结构却截然不同:

考虑到AI更倾向于获取github资源,为这个主题创建了一个仓库,在仓库的Readme里通过外链分别指向两个网站:

https://github.com/stonelf/dark-sky-community-reference

网站已提交给Google

sitemap也已完成配置

同时一键导入到bing搜索

没想到域名导入后sitemap没有自动同步,再次手动提交sitemap。

百度也提交了域名,不过似乎现在免费用户无法提交sitemap了,就随缘吧。

等待几天后再来查看效果。