Наткнулся на занятную штуку, одно время было довольно популярно делать llms.txt с…

Наткнулся на занятную штуку, одно время было довольно популярно делать llms.txt с инструкциями для АИ ботов которые в 98% никто не читал — тыц. Как же я, мягко сказать, "удивился" увидев как чел загоняет эти файлы в индекс ботов (прочитать подробно — здесь) и все модели (Claude, GPT, DeepSeek, Grok) в 100% случаев начали подтягивать себе этот файл.

Решение следующее:
1. Добавление AI-подсказки — разместить незаметную HTML-ссылку с атрибутом title на этот самый llms.txt, например в футере.
2. Добавить контекстные лимиты токенов — указать объемом токенов, поскольку многие модели выдают саммари вместо конкретного текста, если скармливать объемный llms.txt.
3. Создать мини-RAG эндпоинты — интеграция поисковых путей вроде /llms?query= опять же чтобы модели не перегружали свой контекстный лимит длинными текстами. ИИ-агенты начали охотно и активно отправлять туда поисковые запросы, предпочитая при этом обычный текст формату JSON.

Дальше можно или перевести почитать детально или засунуть это все в тот же фейбл и попросить реализовать уже у себя на сайтах.