Бесплатные инструменты
Бесплатный SEO-анализ сайта
Введите адрес страницы. Получите SEO-анализ с оценкой и советами, а во второй вкладке увидите, могут ли ChatGPT, Claude и Perplexity добраться до сайта.
Что делает проверка
- Читает robots.txt и применяет правила к каждому ИИ-боту так же, как это делает сам бот (RFC 9309: сначала своя группа, потом группа «*», побеждает самое длинное правило).
- Заходит на главную с настоящим User-Agent каждого обходчика и сравнивает ответ с обычным браузером. Так видны правила Cloudflare и файрвола, которые закрывают ИИ без вашего ведома.
- Проверяет /llms.txt и /llms-full.txt по формату llmstxt.org и ссылки внутри.
- Считает слова в HTML без выполнения JavaScript: именно это читает большинство ИИ-ботов.
Что проверяет SEO-анализ
Длину title и description, canonical, meta robots, мобильный viewport, язык, заголовки H1–H6, объём текста и читаемость, alt у картинок, ссылки, теги Open Graph и Twitter, JSON-LD и ошибки валидации HTML.
Поисковые боты и боты обучения — разные
OAI-SearchBot, Claude-SearchBot и PerplexityBot читают страницы, чтобы ответить на вопрос, и ставят ссылку на источник. GPTBot, ClaudeBot, Google-Extended и CCBot собирают тексты для обучения моделей. Обучение можно закрыть, а поиск оставить: сайт по-прежнему будет в ответах ИИ.
Что такое llms.txt
llms.txt — файл в формате Markdown в корне сайта: название, одна строка о сайте и список главных страниц с короткими пояснениями. ИИ-ассистенты по нему понимают сайт, не обходя его целиком. Он не заменяет robots.txt и карту сайта.
Вопросы
Это бесплатно?+
Да. Проверка для ИИ бесплатная и без регистрации. SEO-анализ даёт гостю три бесплатные проверки в день, после регистрации больше.
Почему бот закрыт, если robots.txt его пускает?+
robots.txt — только просьба. Сервер, CDN или файрвол всё равно могут отказать боту по User-Agent или IP. Мы заходим под именем каждого бота и смотрим настоящий ответ.
Закрывать ли GPTBot?+
Зависит от цели. Запрет GPTBot останавливает обучение на ваших текстах, но не убирает сайт из ответов поиска ChatGPT: за это отвечает OAI-SearchBot. Большинство компаний оставляют поисковых ботов открытыми.
Помогает ли llms.txt в продвижении?+
Ни один поисковик этого не обещает. Он помогает ИИ-ассистентам, которые его читают, быстро понять сайт и сослаться на нужные страницы. Добавляется за десять минут.
Вы храните данные о моём сайте?+
Результат проверки храним 24 часа, чтобы повторные проверки не нагружали ваш сервер. Больше ничего.
Другие бесплатные инструменты
Проверьте, видят ли ваш сайт ChatGPT, Claude и Perplexity
Бесплатно проверим, могут ли ChatGPT, Claude и Perplexity читать ваш сайт: robots.txt, реальный доступ ботов, llms.txt и текст страницы, с советами.
Генератор и проверка llms.txt
Соберём llms.txt из карты сайта за секунды и проверим уже готовый по формату llmstxt.org: заголовок, описание, ссылки. Бесплатно и без регистрации.
Нужен ИИ, который работает с вашим сайтом и документами?
INGDG подключает ИИ к вашим материалам и задачам. Инженер помогает всё настроить.
Попробовать INGDG бесплатно