精通
英语
和
开源
,
擅长
开发
与
培训
,
胸怀四海
第一信赖

锐英源精品原创,禁止转载和任何形式的非法内容使用,违者必究
因为只有Anthropic明确支持llms.txt,所以llms.txt不是必选文件,网站里可以不带llms.txt文件,站长不用特意费心去创建和更新这个llms.txt文件。这是可以接受的第一层面意思。
反转来了,虽然其它家AI公司都明确不支持,比如OpenAI,但网上关于llms.txt的信息很多,并且信息还有点混乱,正因为信息多,并且有Anthropic明确支持llms.txt,很多站长就盲从状态下,开启了对llms.txt的使用,并且,Python里已经有包能够自动生成llms.txt文件。
锐英源软件刚做GEO时,DeepSeek提到了llms.txt,并且推荐了个包,这个包运行很快,几秒就把整个站都生成到了llms.txt里,我又修改了GEO工具,每次把新页面的信息加到了llms.txt里,形成了整站llms.txt状态,文件比较大。
用了一段时间,自己也觉得不太对,因为从软件架构师的角度来看,普通的搜索引擎不需要llms.txt,AI大模型对网站检索是按结构化数据来进行的,结构化的潜在意思是只用重要且明显的数据,整站llms.txt不符合这个风格。于是查了下AI,说不能作整站llms.txt,只能是保留重要精选和入口项。整站llms.txt还会让AI爬虫大量消耗Token,完全违背llms.txt“轻量化快速导航”的设计初衷。
于是我按照保留重要精选和入口项原则,删除了大量无用的行,保留了40个项。同时把我的Python工具代码进行了更新,在手工要求时再添加llms.txt新项。
parser.add_argument(
"--llms", "-l", type=int,
help="为新添加的节点指定默认 llms 选项。1表示添加llms标签,0表示不添加。若未指定,则不添加 <llms> 标签,默认值为 0。llms.txt最多40个项,一般不添加llms新项。"
)
如果只是保留重要精选和入口网页链接,llms.txt不经常变化,几个月才改一次,不费事,哪为什么不保留llms.txt?所以虽然理论上llms.txt不是GEO的必选文件,但事实上llms.txt是必选文件,在独立站根目录下生成llms.txt,保留下来就成了传统。
llms.txt的作用要看它里面项的作用,重要精选项是让AI大模型知道独立站的重点网页,独立站的行业方向,重点网页会更频繁抓取和优先整合,行业方向也会在整合时有指导作用。
入口项表示是重要的栏目页,里面的子栏目和内容页是配合重点的入口,配合信息也很重要,在GEO结构化数据里场景信息是重要信息,场景信息不可能全部塞到一个网页里,有些内容页里的场景信息照样重要,所以入口项在llms.txt里体现也有必要。
在整理llms.txt过程中,独立站站长会对自己的网站有更深入的认识。GEO的结构化、效果化和证据化要求,对独立站是一种推动作用。
llms.txt里一般允许40个链接,40个项,40个对独立站的重要网页和入口栏目页够用了。如果入口栏目页太分散,就是独立站设计失败,因为权重会分散,并不友好。