石家庄华企立方网站建设公司,专业提供企业网站建设、营销型网站建设、商城网站建设、品牌网站建设、响应式网站建设、手机网站建设、网站改版、竞价托管、小程序开发等服务!

石家庄网站建设

15369155510
微信号已复制,请打开微信添加咨询详情!

新闻动态

将想法与焦点和您一起共享

llms.txt有没有用13.7万域名实测它帮不上AI引用

来源:www.zhongyiweb.com 时间:2026-10-27 19:57 浏览次数:次

llms.txt有没有用13.7万域名实测它帮不上AI引用

大家好!今天石家庄华企立方网站建设公司为大家介绍下关于《llms.txt有没有用13.7万域名实测它帮不上AI引用》的问题,以下是石家庄网站建设公司对此问题的归纳整理,让我们一起来看看吧。

2024 年下半年开始,一个叫 llms.txt 的文件在企业官网圈子里迅速流行:把它放到网站根目录,用 Markdown 写清楚网站是做什么的、重点页面有哪些,理论上 AI 大模型就能先读这份「说明书」,更快理解你的网站。不少服务商顺势把它包装成「AI 时代的 sitemap」,甚至列为 GEO 优化项目里的核心交付物。

llms.txt有没有用13.7万域名实测它帮不上AI引用(图1)

问题是,这个前提成立吗?AI 搜索引擎真的会来读这个文件吗?2026 年以来,多家机构用真实服务器日志给出了实测答案,结论比较一致:对 AI 搜索引用来说,这个文件基本帮不上忙。本文把这些数据和官方口径整理出来,供正在考虑要不要做 llms.txt 的企业参考。

一、llms.txt 是什么,承诺的是什么

1. 它的设计初衷:llms.txt 由 Answer.AI 联合创始人 Jeremy Howard 在 2024 年提出,最初面向开发者文档站——让 AI 在读一份技术文档时,能通过一个索引文件快速定位内容,少抓一些无关页面,节省 token。

2. 它不是指令文件:名字虽然像 robots.txt,但它控制不了任何爬虫行为,不能允许谁、也不能阻止谁,本质上只是一份网站自我介绍。「做了它就能被 AI 引用」的说法,是后来 SEO 行业附加上的期待,并不是提案本身的内容。

3. 流行的速度:据 Originality.ai 的追踪统计,互联网上 llms.txt 文件数量从 2025 年 6 月的约 4,088 个,增长到 2026 年 5 月的约 3.6 万个,一年翻了近九倍——但增长的动力主要来自市场猜测,没有任何主流 AI 平台承诺过会读它。

二、13.7 万个域名实测:97% 的文件无人问津

2026 年 6 月,Ahrefs 发布了到目前为止样本规模较大的一次实测:分析其统计服务中 137,210 个有流量域名的服务器日志(2026 年 5 月),逐个核对 llms.txt 的访问记录。几个关键数字:

1. 28% 的网站发布了 llms.txt——四个网站里就有一个做了这个文件,而且这个样本偏技术圈,全网普及率大概率低于此。

2. 97% 的文件在整月零请求——没有任何爬虫、任何人类来读过它们。

3. 少数被读的 3% 里,AI 爬虫只占约两成——GPTBot 的请求量排在前列,Claude Code 这类编程工具的请求量同样靠前,而负责 AI 搜索引用的检索型爬虫(如 PerplexityBot)占比仅约 1%;另有约 12% 的请求来自 GEO/SEO 检测工具——说白了,相当一部分访问来自「检查你有没有做这个文件」的工具本身。

4. AI 爬虫不会主动找不存在的 llms.txt——没做过这个文件的网站,AI 爬虫对 llms.txt 的请求数为零,它们压根不去找。

独立团队的监测结论也类似:Weekerp 对两个网站的 68,759 次 AI 爬虫请求做日志分析,llms.txt 的访问次数为 0,同期 robots.txt 被请求了 1,938 次、sitemap 被请求 1,224 次;OtterlyAI 一项 90 天实验记录了 62,100 次 AI 爬虫访问,触碰 llms.txt 的只有 84 次,约占 0.1%,而同一个站的一个普通内容页平均能获得约 265 次访问。

三、搜索引擎官方把话说得很直白

1. Google 官方文档:2026 年 5 月底,Google 在《生成式 AI 功能优化指南》中专门用「澄清误区」一节写明——想让网站出现在 AI 摘要(AI Overviews)和 AI 模式里,不需要创建新的机器可读文件、AI 文本文件或标记。同年 6 月文档进一步补充:建不建 llms.txt,既不会损害也不会提升你在 Google 搜索中的可见度,因为 Google 搜索直接忽略它。

2. John Mueller 的类比:面对行业里的争论,Google 搜索团队成员 John Mueller 表示,据他所知没有任何 AI 服务宣布使用 llms.txt,看服务器日志就知道它们连查都不查;他把它比作早年已经失效的 keywords meta 标签,认为它只是给解析文档的编程工具省 token 的临时拐杖,不是为搜索准备的。

3. 引用频率没有差异:SE Ranking 在 2025 年底扫描了近 30 万个域名,其中 10.13% 部署了 llms.txt;对比数据显示,有无该文件对 AI 引用频率没有可测量的差异。

机制上其实不难理解:AI 搜索爬虫发现网页的方式与传统爬虫相同——沿链接抓取、直接读 HTML,并不会专门去找一个大多数网站都没有的文件;而且 llms.txt 是网站自己写的自我介绍,AI 若要采信还得逐页核对内容是否属实,省不了多少事。

四、它并非一无是处,但对多数企业官网没用

llms.txt 有一个真实在用的场景:开发者文档索引。Anthropic、Cloudflare、Mintlify 等技术公司都发布了它,Cursor、Claude Code 这类编程助手也确实会读取,用来快速定位 API 文档。如果您的网站承担开发者生态角色,可以顺手维护一份;普通企业官网,自己花十分钟放一个无妨,但付费请服务商把它列为主要交付项目,则相当于在为一个已被实测证明几乎不起作用的动作买单。

把同样的预算省下来,以下几件事在现有实测中更站得住:

1. 检查 robots.txt 别误封 AI 爬虫:GPTBot、OAI-SearchBot、PerplexityBot 等检索型爬虫是读 HTML 的——如果 robots.txt 把它们挡在门外,连被引用的资格都没有。

2. 让正文在 HTML 里直接可见:AI 引擎普遍直接读取网页 HTML,正文不要全部塞进图片或需要交互才加载的组件里。

3. 内容写清楚、写具体:Google 同一份指南列出的可用做法包括内容独特有用、页面可抓取、结构化数据与页面内容一致。带明确数据、问答结构清晰的内容更容易被抽取,这与国内外多项 AI 引用实测的观察一致。

4. 别碰捷径:人为制造虚假引用信号、伪造第三方内容之类的手法已被监管点名,属于不能碰的红线,规范做法始终是真实、可核验的内容。

常见问题

问:已经做了 llms.txt,需要删掉吗?
答:不需要。实测表明它无害也无益,Google 明确表示会忽略它。放着不动即可,不建议再为它投入开发或维护工时。

问:为什么还有那么多服务商在卖 llms.txt 建置?
答:它可交付、可截图、成本低,容易成为「有做事证明」。但作为付费项目并不划算——一个 97% 概率没有任何东西来读的文件,合理定价趋近于零。

问:不做 llms.txt,AI 搜索还能发现我的网站吗?
答:能。AI 搜索引擎通过链接抓取和传统索引发现网页,与普通搜索引擎共用大部分基础设施。让页面可抓取、正文写在 HTML 里、内容具体可核验,才是影响被引用与否的关键因素。

结语

llms.txt 的走红,说明企业在 AI 搜索时代的焦虑是真实的;但焦虑不该变成付费冲动。与其为一个实测中无人读取的文件花钱,不如把精力放在内容质量、可抓取性和第三方可信信源这些被数据反复验证的事情上。如果您正在梳理官网的 AI 可见性现状、规划 GEO 优化方向,欢迎联系石家庄华企立方,我们可以结合您的行业情况,给出一份务实的诊断建议。


想了解更多GEO优化的内容,请访问:GEO优化
本文链接:https://www.zhongyiweb.com/news/574.html
在线咨询还有更多疑问?扫一扫加微信直接咨询(建站优惠中)
llms.txt有没有用13.7万域名实测它帮不上AI引用
免责声明:本文内容由互联网用户自发贡献自行上传,本网站不拥有所有权,也不承认相关法律责任。如果您发现本社区中有涉嫌抄袭的内容,请联系网站客服进行举报,并提供相关证据,一经查实,本站将立刻删除涉嫌侵权内容。本站原创内容未经允许不得转载。
推荐新闻
最新新闻
随机新闻
全新网站设计案例
    • 我们能做什么

      致力于网站建设与竞价托管,擅长领域包括石家庄网站建设、竞价托管代运营、全网营销、短视频代运营、GEO优化、外贸独立站优化服务等。服务范围涵盖基础的域名服务、主机服务;企业邮箱、云服务器、网络营销等应用服务,为GEO优化中小企业提供全网营销解决方案,帮助客户在新的互联网+AI环境中保持优势。

    • 我们的优势

    • 更多 +关于华企立方

      石家庄华企立方,坚持用成熟稳定的技术,以客户效果为导向,向用户提供优质的石家庄网站建设服务和网络营销服务,从而赢得了石家庄众多企业以及全国用户的信赖。我们将为客户能达到更好的营销效果全力以赴!

服务热线

企业网站建设

竞价推广托管

微信小程序

扫一扫加微信咨询

Copyright © 2025-2038 https://www.zhongyiweb.com/. 石家庄华企立方 版权所有 网站地图 分站 石家庄网站建设 冀ICP备2025132001号冀公网安备13010402003305号