← 全部文章
阅读约 4 分钟

什么是 llms.txt,以及你的网站为什么需要它

llms.txt 是 AI 时代的 robots.txt:一份纯文本地图,告诉模型你的网站是什么、优质内容都在哪里。本文讲清它是什么,以及如何添加一个。

AI 助手越来越多地通过直接阅读你的网站来回答问题。但你的页面是为浏览器打造的——导航栏、脚本、Cookie 横幅——而不是为一个想找到实质内容的模型准备的。llms.txt 解决了这个问题:一个放在网站根目录的纯文本文件,用清晰的语言说明你的网站是什么、重要内容都在哪里。

它是如何工作的

你把一个文件放在 /llms.txt。它以一个 H1(你的网站名称)开头,接着是一段简短摘要,然后是指向真正重要页面的精选链接——文档、核心文章、产品页。有些网站还会额外提供 llms-full.txt,把全文内联进去,这样模型根本无需抓取。

# Acme Docs

> The developer platform for X.

## Guides
- Quickstart: https://acme.dev/docs/quickstart
- API reference: https://acme.dev/docs/api

它为什么对排名有意义

  • 模型倾向于引用它们能干净解析的来源——llms.txt 让你最好的页面清晰可读。
  • 它是对 robots.txt 和 sitemap.xml 的补充,而不是替代。
  • 它是一份便宜的保险:寥寥几行,就能左右 AI 如何描述你。

难点在于,随着网站变化如何让它保持正确。这正是「AI 可抓取性」技能自动化处理的琐事——它读取你真实的路由,把 llms.txt、llms-full.txt 以及一份接好的 sitemap 直接写入你的代码仓库。

什么是 llms.txt,以及你的网站为什么需要它