AI 快讯 编译自 the_decoder #功能更新#工具评测#AI代理

Google Lighthouse新增Agentic Browsing审计,检查网站对AI代理和llms.txt的兼容性

Google在Lighthouse工具中实验性推出Agentic Browsing审计,评估网站对AI代理的友好程度,包括是否支持llms.txt标准。这对网站运营者和AI开发者意味着什么?中文用户如何应对?

编译发布 2026/05/24 原文发布 2026/05/21

一句话看懂

Google在Lighthouse分析工具中新增”Agentic Browsing”实验性审计,检查网站是否支持llms.txt文件,以评估其对AI代理的友好程度。

详细发生了什么

Google正在其Lighthouse性能分析工具中测试一项新的实验性类别——“Agentic Browsing”(代理浏览审计)。该审计旨在评估网站对AI代理(如Google的Gemini、OpenAI的GPT等)的兼容性,特别是检查网站是否提供了llms.txt文件。llms.txt是一种提议的开放标准,允许网站管理员向AI代理提供关于如何访问和使用网站内容的指南,类似于robots.txt但针对大型语言模型。

Lighthouse是Google Chrome开发者工具中的一项功能,用于审计网页的性能、可访问性、SEO等。此次新增的Agentic Browsing审计将帮助网站所有者了解其站点是否对AI代理友好,并给出改进建议。目前该功能仍处于实验阶段,但预示着Google正积极推动网站为AI代理时代做好准备。

中文圈视角

对中文网站运营者和AI开发者来说,这一变化有几点值得关注:

  1. llms.txt标准尚未普及:目前llms.txt仍是一个提案,中文网站几乎无人使用。但Google此举可能推动该标准成为行业规范。如果你的网站依赖AI流量(例如被AI搜索或代理抓取),提前部署llms.txt可以抢占先机。

  2. 国产AI代理的兼容性:国内AI代理如百度文心、阿里通义千问、字节豆包等,目前尚未明确支持llms.txt。但Google的审计标准可能被国内工具效仿,例如百度站长平台或阿里云性能测试工具。建议关注国产AI代理的抓取行为,并考虑在robots.txt中补充针对AI的规则。

  3. 合规与数据安全:llms.txt允许网站指定哪些内容可以被AI使用,这对数据出境和内容安全有潜在影响。中文网站应谨慎设置,避免敏感信息被AI代理抓取并传输到境外。

  4. 中文圈盲点:目前国内讨论多集中在AI生成内容(AIGC)的版权,而忽略了网站与AI代理的交互标准。Google此举提醒我们,网站基础设施需要为AI代理时代升级。

几条值得记住的细节

  • Google Lighthouse新增的”Agentic Browsing”审计目前是实验性功能,需在Chrome Canary或开发者工具中手动启用。
  • 审计主要检查网站是否提供llms.txt文件,以及该文件是否格式正确、内容合理。
  • llms.txt标准由社区提出,旨在让网站管理员控制AI代理如何访问内容,类似robots.txt但针对LLM。
  • 该审计还可能评估网站的结构化数据、页面加载速度等对AI代理友好的因素。
  • Google尚未公布该审计正式上线的时间表,但实验性功能通常会在几个月内逐步推广。

一句话总结

如果你的网站希望被AI代理优先抓取和引用,现在就该研究llms.txt并优化Agentic Browsing审计。