AI的抓取规范是什么？

[violet1 (violet)]

搭建了一个咨询站，覆盖行业广泛，想问问大佬们，网站内容中ai的抓取规范是什么？

[Colin5887]

有很多，不过，绝大多数的公司都不遵守就是了

[Qingwa (青小蛙)]

这个：

The /llms.txt file – llms-txt