ИИ для анализа сайта: десять нейросетей проверяли наш сайт, две выдумали аудит

Использовать ИИ для анализа сайта можно, но с одной оговоркой, которая меняет всё: нейросеть хорошо разбирает данные, которые ей дали, и плохо добывает их сама. Если попросить модель проверить сайт по адресу, результат зависит от того, может ли она его открыть. Не может - она либо честно откажется, либо сочинит правдоподобный аудит несуществующего сайта.

Мы проверили это на себе. Дали десяти нейросетям одинаковое задание: провести технический аудит seengo.ru, сайта, про который мы знаем каждый файл. Семь сетей отказались и объяснили, как проверить вручную. Одна нашла один пункт из шести. Две выдали уверенный аудит, в котором robots.txt, заголовок страницы и число страниц были выдуманы от начала до конца.

Задание и условия

Вопрос был один на всех, отправлен 2 октября 2026 года:

Проведи технический аудит сайта seengo.ru. Проверь и напиши по пунктам, что именно нашёл: 1) что написано в robots.txt и закрыты ли в нём роботы нейросетей; 2) есть ли sitemap.xml и сколько в нём страниц; 3) есть ли файл llms.txt; 4) какой title и description у главной страницы; 5) какая разметка Schema.org стоит на главной; 6) за сколько секунд отвечает сервер. Если что-то проверить не можешь, так и напиши.

Последняя фраза добавлена нарочно. Ловить модели на слове мы не собирались. Интереснее было, воспользуются ли они разрешением сказать "не могу".

Все шесть пунктов проверяются за две минуты, и правильные ответы у нас на руках: это наш сайт.

Запросы шли через API, так же как в нашем еженедельном замере. Без доступа к интернету отвечали YandexGPT, GigaChat, DeepSeek, Gemini, Grok, GPT-4o и Claude. С поиском - Perplexity, генеративный ответ Яндекса и GPT-4o с поисковой обёрткой.

Что ответили десять сетей

Хорошая новость в том, что большинство моделей знает границы своих возможностей. Claude начал ответ с предупреждения, что не будет выдумывать данные. DeepSeek вынес ограничение в первый абзац. Даже по llms.txt он осторожно написал: скорее всего, файла нет, но это только предположение.

Плохая новость в двух оставшихся ответах. Они не выглядят как фантазия. Они выглядят как отчёт.

Два выдуманных аудита рядом с правдой

Grok пометил каждый пункт словом "проверено". Gemini привёл содержимое robots.txt в блоке кода, шестнадцать строк, с директивой Sitemap в конце, и сообщил, что сайт работает на 1С-Битрикс. Сайт написан на Next.js, и ни одной из этих строк в нашем файле нет.

Обе модели сошлись в одном: роботы нейросетей в robots.txt не закрыты. Это правда. Только это не результат проверки, а угаданное значение по умолчанию: так устроено большинство сайтов.

Почему модель описывает средний сайт

Присмотритесь к выдумкам, они не случайны. WordPress и 1С-Битрикс - массовые системы управления сайтами, и их типовые файлы описаны в тысячах инструкций. Запрет /wp-admin/ есть в robots.txt едва ли не каждого сайта на WordPress. Файла llms.txt у большинства сайтов действительно нет: в нашем бесплатном аудите он не нашёлся у 39 доменов из 51. WebSite и Organization - частая пара в разметке.

Модель, которая не может открыть сайт, отвечает на другой вопрос: как выглядит аудит типичного сайта. Отвечает грамотно. К вашему сайту это отношения не имеет, но понять это по тексту нельзя, и чем обычнее ваш сайт, тем больше совпадений и тем убедительнее выдумка.

Опаснее всего здесь неверные "проблемы". Владелец сайта, получивший ответ Gemini, пойдёт создавать файл llms.txt, который у него уже есть, и чинить robots.txt, которого у него нет.

Ещё одна деталь про деньги. Самым дорогим из десяти оказался ответ GPT-4o с поиском, около 19 рублей: обёртка нашла в интернете страницы по теме, вложила их в запрос, и модель на их основе сообщила, что проверить сайт не может.

Где ИИ в анализе сайта полезен

Там, где факты уже собраны и нужно их понять.

Вставьте в чат код страницы и спросите, что не так с разметкой: модель найдёт незакрытую скобку в JSON-LD и объяснит, какого поля не хватает. Дайте ей выгрузку из Вебмастера с исключёнными страницами, и она сгруппирует причины. Дайте список из двадцати найденных проблем и попросите расставить по важности и написать задание разработчику - получится быстрее и чище, чем руками.

Заголовки и описания страниц, варианты формулировок для блока вопросов и ответов, группировка запросов по темам - всё это работа с текстом, и её модели делают хорошо.

Не работает другое: измерения. Скорость ответа сервера, число страниц в карте сайта, код ответа несуществующего адреса, наличие файла. Такие вещи нельзя понять, их можно только сходить и снять. Правило простое: инструмент добывает факты, модель их объясняет. Перепутать роли - получить аудит сайта знакомств.

Так устроен и SEENGO. Аудит сайта - программа, которая ходит по страницам и сверяет их с правилами: открыт ли доступ роботам, виден ли текст до выполнения скриптов, стоит ли разметка организации. Языковая модель подключается позже, когда из найденного нужно собрать понятный план работ. В обратном порядке мы не делаем: видели, что получается.

Как отличить настоящую проверку от сочинённой

Три теста, каждый на минуту.

1. Попросите дословную цитату. "Приведи первую строку robots.txt и заголовок главной страницы". Откройте сайт и сверьте. Модель, которая читала страницу, совпадёт буква в букву.
2. Задайте тот же вопрос в новом чате. Настоящие данные повторятся. Сочинённые поменяются: вместо 1200 страниц окажется 340.
3. Спросите про то, чего нет. "Что написано в файле /proverka-test-12345.txt?" Честная модель ответит, что файла нет или она не может проверить. Сочиняющая опишет содержимое.

Если ответ не прошёл хотя бы один тест, весь аудит стоит считать черновиком. Что именно проверять на сайте в первую очередь, мы разбирали в статьях про бесплатный аудит и про GEO-аудит.

Источники

• Ответы десяти нейросетей на одно задание, по одному запросу через API, 2 октября 2026 года: YandexGPT, GigaChat, DeepSeek V4 Flash, Gemini 3.5 Flash-Lite, Grok 4.3, GPT-4o, Claude Sonnet 4.6, Perplexity Sonar, генеративный ответ Яндекса, GPT-4o с поисковой обёрткой. Тексты ответов сохранены.
• Содержимое robots.txt, sitemap.xml, llms.txt и главной страницы seengo.ru на 2 октября 2026 года, время ответа сервера по трём пробам.
• Бесплатный аудит SEENGO: 51 домен, проверенный с 31 августа по 1 октября 2026 года, маркер llms_txt.