关闭

Tryaivo™技术

AIWO:Lighthouse把llms.txt纳入审计

2026-11-10 05:09:50 浏览:

摘要

Lighthouse 13.3 起在性能报告里新增 Agentic Browsing(智能体浏览)分类,llms.txt 审计被列为其中一项,检查三个条件:有 H1、正文不少于 50 字符、至少一个 Markdown 格式链接。若站点根本没有 /llms.txt,该审计标记为"不适用"而非失败。与此同时 Google Search 侧仍明确表示 AI 功能不需要 llms.txt。对站长的动作项很清楚:保留文件就按格式修好,不打算保留就不必为这条审计新增文件。

事件与规则细节

事件为 Chrome Lighthouse 工具侧的更新:Lighthouse 13.3 版本引入 Agentic Browsing 分类,llms.txt 审计位于该分类下。Chrome 官方文档将该文件描述为"面向 LLM 与 AI 智能体的机器可读站点摘要",并称之为"新兴约定(emerging convention)",明确"目前提供该文件是可选的";文档同时说明,缺少该文件时智能体可能需要花更多时间抓取站点。Lighthouse 13.3 的具体发布日期原文未披露。

审计检查的三项条件(任一不满足即判失败,均以 DebugBear 对 Agentic Browsing 审计的文档说明为准):

检查项要求常见失败原因
H1 标题文件首行需为 # 站点或项目名称直接以段落开头,无一级标题
最小长度正文不少于 50 字符只有一句占位文本
Markdown 链接至少一个 文字 形式链接裸 URL、短横线分隔的 URL 列表不算链接

/llms.txt 返回 404 时,审计结果为"不适用(Not Applicable)",不构成失败;但 Lighthouse 在抓取文件时遇到服务器错误会单独标记。也就是说:加了这个文件才有考试,不加不会挂科。

一个可复现的修复实测:Search Engine Journal 在 2026 年 7 月报道的案例中,站点文件里 URL 均可访问,但因未使用 Markdown 链接写法被判 "File does not appear to contain any links";作者把每条链接改为 文字 并在描述前加冒号后,该项得分从 0.67 升至 1.0,文件仍以纯文本方式提供。这暴露了审计的本质——它检查的是可解析性,不是有用性。

两套官方口径并存

  • Google Search 侧:搜索优化文档把 llms.txt 列入"AI 功能不需要的做法";John Mueller 在 2026 年 6 月称其"目前纯属推测",并表示没有任何 AI 系统在使用它。
  • Chrome Lighthouse 侧:将 llms.txt 纳入 Agentic Browsing 审计,称其为新兴约定、提供可选。

Search Engine Journal 的解读是"可见性(visibility)与就绪度(readiness)"的分野——Search 管排名与引用,Lighthouse 管浏览器智能体能否顺利使用站点。该解读属媒体分析,非 Google 官方表态。

补充背景:llms.txt 由 Jeremy Howard 于 2024 年 9 月 3 日提出(llmstxt.org),2026 年 8 月 10 日修订至 v2,v2 允许文件放在子路径(如 /docs/llms.txt)并覆盖其下全部内容。该文件至今为提案,非 W3C/IETF 标准。

对站长与 AIWO 落地的实操含义

  • 先做取舍,再谈优化。若站点已有 /llms.txt:按三项检查修到通过,成本很低(多数情况只是链接写法)。若没有:这条审计不会判你失败,是否需要新增取决于你是否面向 AI 智能体(文档站、API 站、SaaS 站点更有必要)。
  • 文字 是唯一有效写法。裸 URL、纯短横线列表在审计里等于零链接。批量检查可用一条命令筛:抓取 /llms.txt 后匹配 \]\(,无匹配即需整改。
  • H1 与 50 字符是硬门槛。文件首行必须是 # 名称,正文合计超过 50 字符;很多站点栽在"只有一段简介、没有标题"。
  • 不要把 llms.txt 当选 ranking 杠杆。Search 侧口径明确不影响排名;把它当"站点给智能体看的目录页",价值在智能体可读性与抓取效率,不在引用率提升。
  • 审计标准会变。Agentic Browsing 分类较新,部分第三方资料称其为实验性类别(Chrome 的 llms.txt 文档页未使用该标签),后续 Lighthouse 版本检查项可能调整,建议纳入月度例行复查而非一次性改造。

出处

  • Chrome 官方文档(llms.txt 审计说明):https://developer.chrome.com/docs/lighthouse/agentic-browsing/llms-txt
  • 审计规则与修复案例整理(2026-11-05):https://rankedtool.com/llms-txt-lighthouse-audit
  • 审计三项条件文档(DebugBear):https://www.debugbear.com/docs/agentic-browsing/llms-txt-does-not-follow-recommendations
  • llms.txt 提案原文:https://llmstxt.org

规范/标准号:Lighthouse 13.3(工具版本);llms.txt v2(2026-08-10 修订,提案非标准)

发布日期:Lighthouse 13.3 具体发布日期未披露;本文所引审计说明页更新于 2026-11-05

生效日:不适用(工具审计项,随版本发布生效)

标签:AIWO、AI可见度、AI搜索优化、llms.txt