Новая попытка контролировать веб-трафик, как никогда вредная для Интернета, заключается в блокировке и маркировке агентов, в результате чего одна многомиллиардная компания решает, кто получает доступ к публичным веб-страницам, а кто нет. Cloudflare пытается стать платной кассой для доступа к информации, находящейся в открытом доступе. Это решение преподносится как защита создателей, но те из нас, кто работал над защитой Интернета, знают, что это просто еще один способ получить контроль над тем, кто может видеть и использовать информацию в мире.
LLMS и агенты быстро становятся нормой по сравнению с поисковыми системами и действиями людей. Если провайдер инфраструктуры решает, какую страницу может прочитать модель искусственного интеллекта, а какую нет, он решает, кто получит видимость, а кто исчезнет. Блокировки не останавливают сбор данных; они удорожают доступ, закрывают доступ для малого бизнеса и поощряют неэтичные практики. Каждый крупный скачок в Интернете, от систем сравнения цен до больших языковых моделей, был построен на возможности сбора публичных веб-данных. Открытый Интернет имеет решающее значение для развития технологий.
Более того, это в конечном итоге навредит создателям и СМИ – тем самым группам, которые, как утверждается, защищают.
Этот шаг наносит удар в самое сердце основного принципа Bright Data: публичные данные должны оставаться публичными. В течение десяти лет мы, сотрудники Bright Data, боролись за защиту публичных веб-данных на каждом шагу. Мы выиграли судебные процессы, которые определили публичные веб-данные и законность доступа к ним в широких масштабах. Что такое публичные данные, ясно и определено законом. Мы не отступим и не поддадимся на очередную попытку закрыть доступ к публичной информации.
Bright Data – это ответ на угрозу открытого веба для обычных пользователей и предприятий. Это уровень доступа для ИИ, агентов и бизнес-аналитики, который гарантирует, что данные, на которые полагается ваша команда, будут поступать в ваш конвейер, несмотря на попытки блокировки. Наши продукты поставляются с выделенной поддержкой и командой R&D для немедленного реагирования на изменения веб-сайта.
Web MCP бесплатен для всех и работает в 96 % случаев использования. Добавьте его к своему текущему агенту, чтобы продолжить поиск и взаимодействие с Интернетом без блокировки. Вы можете бесплатно выполнять до 5 000 запросов в месяц в рамках нашего обязательства по поддержанию открытости Интернета. Также доступно корпоративное решение.
Открытый веб слишком ценен, чтобы его могла оградить одна компания. Если издатель действительно хочет, чтобы контент был закрытым, решение простое: поместите его за логин. До тех пор публичный контент остается публичным.
Вместе мы сможем сохранить интернет открытым, справедливым и доступным для инноваций и всех, кто от него зависит.
Ор Ленчнер
Генеральный директор, Bright Data