本帖使用社区公益推广,符合推广要求。我申明并遵循社区要求的以下内容:
我的项目是免费使用的,无收费(变相收费、赞助)部分: 是
我的帖子已经打上 公益推广 标签: 是
我的项目属于个人项目,与公司或商业机构无关: 是
我的项目不存在QQ、TG等群组引流: 是
我的项目不存在非运营必要的网站引流: 是
我的项目不存在为他人推广、AFF: 是
我的项目无关联的商业项目: 是
我的站点存在登录,并已接入 LINUX DO Connect: 是
我帖子内的项目介绍,AI生成、润色内容部分已截图发出: 是
以上选择我承诺是永久有效的,接受社区和佬友监督: 是
做了个中文 llms.txt 小工具站:cetxt.com
输个域名就能体检打分,看看你的 llms.txt 哪里不行;没文件的话,30 秒给你生成一份合规范的。
纯前端,东西都在你本地处理,不上传
做的时候顺手把 1000 个中文大站的 /llms.txt 挨个抓了一遍,结果挺有意思的。
1000 个站,真正放了文件的只有 30 个,3%。
164 个返回 200,打开一看是网页壳——状态码看着没问题,AI 抓到的却是个壳,等于白给。412 个直接 404。390 个压根抓不到,WAF 拦的拦、超时的超时,这部分不算没有,别误会。
满分 100 的有 9 个:B站、Gitee、魔搭、SHEIN、TAPTap、环球网,确实做得认真。
百度,404,啥也没有。淘宝京东拼多多,返回 200,打开全是 HTML 壳。抖音,404。字节的 Coze 倒是做了,但 50 分,74 个警告,链接重复一堆——做了跟做好是两码事。阿里系里面,唯一满分的是魔搭社区。
顺带测了 100 个独立站,好一些,19% 有文件,但博客圈只有 7%。毛病都差不多:链接光秃秃一个地址没描述,或者缺一句摘要,都是花半小时就能修好的小事。
1000 条完整数据放站里了,能搜能筛。样本是公开排名凑的近似样本,不是什么官方榜单,图一乐,别太当真。