Новый взгляд на интернет: Microsoft и Cloudflare против Google

Привычный нам поиск информации в интернете может измениться. На смену выдаче ссылок по ключевым словам приходят прямые ответы, сгенерированные искусственным интеллектом (ИИ). С этим уже знакомы пользователи Google, но грядут перемены.

Microsoft и Cloudflare объединяют усилия, чтобы ускорить этот переход. Они предлагают новый стандарт Microsoft под названием NLWeb и инфраструктуру Cloudflare AutoRAG, разработанную специально для ИИ.

Этот шаг направлен не столько на оптимизацию под поисковые системы (SEO), сколько на переосмысление взаимодействия веб-сайтов с людьми и ИИ-агентами. Это вызов доминированию Google и новый взгляд на то, что значит "посетить" веб-сайт.

От поиска к ответам: новая эра информации

Традиционно поиск в интернете строится на ключевых словах: вы вводите запрос, а поисковая система выдает список ссылок, отсортированных по релевантности.

Эта модель служила верой и правдой долгие годы, но интернет продолжает расти, и ИИ выходит на первый план в способах получения информации.

Инструменты вроде ChatGPT, Claude и Copilot формируют новые ожидания. Многие пользователи предпочитают получать прямые ответы, не тратя время на изучение множества ссылок.

Именно здесь в игру вступают системы ответов, которые стремятся предоставить пользователю нужную информацию моментально, исключая лишние шаги.

Microsoft и Cloudflare позиционируют NLWeb + AutoRAG как фундамент для поддержки этого сдвига, делая сайты более "дружелюбными" к ИИ. Они считают, что в будущем значительная часть веб-трафика будет генерироваться ИИ-агентами, наравне с обычными пользователями.

Как работают NLWeb и AutoRAG

NLWeb – это новый веб-стандарт, разработанный Microsoft. Он позволяет веб-сайтам предоставлять структурированные ответы на запросы, сформулированные на естественном языке.

Проще говоря, NLWeb позволяет вам задать вопрос веб-сайту, используя, например, команду /ask. Вместо того, чтобы искать ответ на страницах сайта, вы получаете его сразу.

Идея в том, чтобы веб-сайты больше напоминали "разговорчивые" приложения, а не просто статические страницы с информацией.

AutoRAG – это сервис Cloudflare, который автоматизирует процесс Retrieval-Augmented Generation (RAG). Он сканирует веб-сайт, индексирует контент и преобразует его в векторные представления, которые хранятся в специальной базе данных.

Эта система постоянно обновляет контент, снимая с владельцев сайтов техническую задачу по созданию собственной векторной базы данных.

Вместе NLWeb и AutoRAG позволяют веб-сайтам отвечать на запросы как от людей, так и от ИИ-агентов, не прибегая к традиционному "скрейпингу" (автоматическому сбору данных).

В панели управления Cloudflare вы можете заблокировать ботов для обучения ИИ, если вам нужен больший контроль. Чтобы включить новую функцию, перейдите в Compute & AI → AutoRAG, выберите Create in AutoRAG и выберите опцию NLWeb Website Quick Deploy.

Риски и вызов для Google

Google доминирует в сфере веб-поиска благодаря технологиям сканирования, индексации и ранжирования веб-страниц. ИИ Gemini от Google уже предоставляет прямые ответы, и компания запустила режим ИИ для поиска.

NLWeb и AutoRAG предлагают альтернативный подход, обходя модель сканирования и ранжирования. Если эта технология получит широкое распространение, она может перенаправить трафик из Google в экосистему Microsoft, укрепив позиции Bing и Copilot.

Но есть и риски для пользователей. Системы ответов исключают посредника, что может показаться удобным, но они не идеальны. Они могут быть подвержены предвзятости и не всегда предоставлять точную информацию.

Кроме того, опора на ответы, сгенерированные ИИ, может снизить видимость небольших сайтов и лишить финансирования тех, чей контент использовался для обучения этих инструментов.

Мнение редакции MSReview: Подход Microsoft и Cloudflare к переосмыслению интернета выглядит многообещающим. Он может упростить получение информации и повысить эффективность взаимодействия с веб-сайтами. Однако необходимо учитывать риски, связанные с точностью и предвзятостью ответов ИИ. Важно обеспечить справедливую компенсацию создателям контента, используемого для обучения этих систем. Вероятно, будущее веба будет связано с гибридным подходом, сочетающим традиционные методы поиска с возможностями, предоставляемыми ИИ.