Короткий ответ
llms.txt не работает, если файл не открывается, содержит случайные URL, повторяет sitemap без приоритетов, не связан с качественными HTML-страницами, не указывает правила цитирования или противоречит robots.txt, sitemap, canonical и noindex.
1. Файл недоступен или отдает неправильный статус
Проверьте адрес /llms.txt. Он должен открываться без авторизации, отдавать 200 OK и обычный текст. Редиректы, 404, HTML вместо текста, ошибки кодировки и блокировки на уровне CDN делают файл бесполезным как понятный вход для ассистентов.
2. Внутри нет карты источников
Если в файле только общая фраза о компании или копия всех URL из sitemap, пользы мало. Нужны разделы: описание сайта, важные файлы, knowledge, tools, research, методология, редакционная политика, правила цитирования и приоритетные страницы.
- не добавляйте все страницы подряд;
- не добавляйте URL, которые закрыты noindex или канонизированы на другие страницы;
- не добавляйте страницы без экспертности, примеров и даты обновления;
- не забывайте про правила цитирования.
3. Файл конфликтует с другими сигналами
llms.txt может указывать на страницы, которых нет в sitemap, которые закрыты robots.txt, имеют noindex или ведут canonical на другой URL. Это не всегда авария, но если такие противоречия массовые, карта источников выглядит недостоверной.
4. На сайте нет сильных HTML-источников
Главная ошибка - ждать эффекта от файла, когда сами страницы слабые. Для AI-ready стратегии нужны короткие ответы, понятные H2, FAQ, schema, авторство, дата обновления, примеры, методология, внутренние ссылки и полезные инструменты. llms.txt только помогает найти эти материалы.
Как исправить
- Проверьте статус файла и откройте его вручную.
- Удалите мусорные, дублевые, приватные и неканонические URL.
- Добавьте блоки knowledge, tools, research, методология, редакционная политика.
- Добавьте правила цитирования и ссылку на sitemap.xml.
- Проверьте ключевые страницы через AI-ready checker.
- После публикации повторите проверку llms.txt.
Что использовать для диагностики
Сначала запустите llms.txt checker. Если файл нужно пересобрать, используйте llms.txt generator. Для страниц-источников отдельно запустите AI-ready checker и schema checker.