Эпоха, когда для получения поискового трафика достаточно было открыть сайт для индексации Google или Яндекса и выдать неплохой текст, официально подошла к концу. Сегодня ландшафт меняет GEO (Generative Engine Optimization) — оптимизация под генеративные ответы нейросетей. Масштабный технический аудит 50 крупнейших контентных и коммерческих ресурсов оказался отрезвляющим: привычная архитектура сайтов трещит по швам, когда сталкивается с ИИ-поисковиками.
Барьер первый: Почему свободный доступ остался иллюзией
Первое, с чем сталкивается любой ИИ-поисковик вроде Perplexity или поисковые роботы OpenAI и Anthropic — это физическая возможность зайти на страницу и считать ее содержимое. На базовом уровне классического SEO здесь все кажется стабильным: большинство исследованных сайтов успешно отдают свой контент. Вебмастера прописывают правила в robots.txt, следят за кодами ответов сервера и считают, что задача выполнена.
Однако обратная сторона этих цифр указывает на скрытый кризис. Почти четверть веб-ресурсов полностью отрезаны от будущего ИИ-трафика еще на взлете. Причина кроется в слишком агрессивных настройках защитных экранов (WAF) и Cloudflare, которые путают легитимных ИИ-исследователей с вредоносными парсерами. Ситуацию усугубляет избыточный JavaScript-рендеринг (CSR). Текстовые модели ИИ просто отказываются тратить огромные вычислительные мощности на расшифровку тяжелых скриптов ради одной статьи и выкидывают такие страницы из своего индекса сканирования.
Барьер второй: Куда исчезают ссылки на первоисточники
Даже если сайт попал в список доступных и нейросеть успешно забрала текст в свою базу, это не гарантирует проекту переходов. Главная трагедия разворачивается на этапе формирования ответа пользователю, когда алгоритм должен связать факт с первоисточником и поставить на него активную ссылку. Здесь планку качества смогли преодолеть немногим более трети сайтов. Остальные ресурсы остаются для нейросетей «безымянными донорами».
Чтобы понять, почему ИИ забирает смысл, но не дает трафик, нужно заглянуть в физику работы больших языковых моделей (LLM). В ходе аудита мы измерили показатель DOM-to-Text Ratio — соотношение чистого текста к общему объему HTML-кода. На большинстве сайтов вес полезного контента составляет менее 8%. Все остальное пространство забито бесконечными вложенными тегами <div>, инлайн-стилями и тяжелой SVG-графикой.
Когда страница попадает в контекстное окно ИИ-модели, до 85% своей оперативной памяти (токенов) алгоритм тратит на продирание сквозь мусорный код. В результате плотность токенов падает, внутренний слой связывания данных нейросети теряет маркеры авторства, и вместо цитирования конкретного сайта модель выдает общий обезличенный ответ.
Барьер третий: Тотальный провал перед лицом ИИ-агентов
Потеря кликов в информационных статьях — лишь вершина айсберга. Настоящая катастрофа обнаружилась в коммерческом секторе веба. В 2026 году интернет наводнили автономные ИИ-агенты (Web Agents). Это роботы, которые приходят на сайт не читать статьи, а выполнять прямые поручения человека: «сравни цены на авиабилеты», «найди на этом сайте товар в наличии и положи в корзину» или «забронируй номер».
На этом, самом денежном этапе, современный веб оказался абсолютно парализован. Готовность к действиям роботов-покупателей (Agentic Readiness) зафиксирована всего у 2% сайтов. Тотальные 98% коммерческих проектов для них полностью закрыты.
Главным препятствием стали классические системы защиты от ботов, включая капчи и невидимые экраны. Пытаясь защититься от спама, сайты блокируют до 92% автоматических сессий полезных ИИ-агентов, буквально выставляя за дверь платежеспособных клиентов. Второй барьер — слепой динамический интерфейс. Кнопки на сайтах часто лишены семантических атрибутов aria-label, а ссылки генерируются динамически через скрипты без прямых URL. ИИ-агент, ориентирующийся по дереву доступности (Accessibility Tree), просто не видит, куда нужно «кликнуть» для совершения целевого действия.
Как выйти из опасной зоны
Вывод из нашего исследования очевиден: если сайт спроектирован по лекалам прошлых лет, в новой экосистеме GEO его физически не существует. Вебмастера продолжают бороться за старые позиции в выдаче, пока трафик и реальные продажи забирают те самые 2% компаний, которые перестроили свою техническую архитектуру под стандарты искусственного интеллекта.
Чтобы ваш проект не остался за бортом нового интернета, важно прямо сейчас оценить чистоту кода, плотность токенов и доступность страниц для нейросетей. Проверить, входит ли ваш ресурс в число подготовленных к GEO сайтов, можно с помощью нашего обновленного инструмента — Калькулятор индекса AISI v2.0 на Webindex.
Что такое готовность сайта к AI и GEO (Agentic Readiness)?
Это показатель того, насколько техническая архитектура вашего сайта понятна для алгоритмов генеративного поиска (GEO) и автономных ИИ-агентов. Он измеряет способность сайта не просто отдавать текст краулерам, но и нативно передавать смысловые связи для получения цитирования, а также открывать интерфейс для автоматических транзакций роботов.
Почему нейросети часто не ставят ссылки на первоисточник (Attribution)?
Главная причина — избыточный мусорный код. Если показатель DOM-to-Text Ratio на странице составляет менее 8%, ИИ-модель тратит до 85% своего контекстного окна на чтение технических тегов и скриптов. Плотность токенов падает, алгоритм «теряет» маркеры авторства и выдает обезличенный ответ без ссылки на сайт.
Как защитные системы сайта вредят коммерческому трафику из ИИ-поисковиков?
Классические WAF-экраны и капчи (CAPTCHA) не умеют отличать вредоносных парсеров от полезных автономных ИИ-агентов, которые пытаются совершить покупку или сравнить цены по поручению пользователя. В результате защитные системы блокируют до 92% автоматических сессий, лишая бизнес прямых продаж.
