С 30 октября Meta вводит условия, которые позволяют ей сканировать сайты, связанные с бизнес-аккаунтами в Meta Business Suite, и использовать найденный контент для развития, исследования и обучения своих продуктов. Для компаний, которые ведут через этот кабинет страницы Facebook, Instagram, Messenger или WhatsApp, ИИ-скрейпинг Meta становится частью коммерческих условий без отдельной кнопки отказа — и это важный сигнал для российских команд, работающих с международными площадками.
Как сообщает ZDNet, новые положения разрешают Meta и действующим от её имени организациям использовать автоматизированные средства: краулеры, боты, роботов, «пауков», user agents и тестовые учётные данные. Им разрешено получать доступ к доменам, страницам и URL, «ассоциированным» с продуктами или услугами владельца бизнес-аккаунта, индексировать, кэшировать, анализировать и собирать доступный там контент, а затем регулярно проверять обновления.
Самая чувствительная часть формулировки — цель такого доступа. Meta прямо оставляет за собой право использовать содержание этих ресурсов для предоставления, разработки, улучшения, исследования, обучения и поддержания целостности продуктов, сервисов и функций компании. Юристы, опрошенные Nieman Lab, трактуют это как согласие владельца бизнес-аккаунта на сканирование связанных с ним сайтов и применение материалов в ИИ-разработке.
Для издателей и контентных проектов выбор выглядит жёстко: принять обновлённые условия либо потерять возможность пользоваться платформой. Отдельного opt-out, по данным публикации, Meta не предлагает. Это не означает, что любой материал сайта автоматически окажется в обучающей выборке конкретной модели, но договорная конструкция заранее даёт корпорации широкое разрешение на работу с контентом.
Meta с такой интерпретацией не согласна. Представитель компании заявил ZDNet, что способ использования веб-краулеров не меняется, а обновление лишь объединяет существовавшие коммерческие условия и правила для self-service-рекламы в более понятный набор документов. Компания также напоминает владельцам сайтов о robots.txt: через этот файл можно обозначить предпочтения по доступу роботов, что описано в её документации для разработчиков.
Проблема в том, что robots.txt — не универсальный юридический стоп-кран. Он работает как техническая инструкция для добросовестного робота, а не как механизм согласования лицензии. Кроме того, новые условия описывают не только обычное индексирование: в них перечислены анализ, сбор, извлечение и использование материалов для обучения. Поэтому командам недостаточно проверить, закрыт ли сайт от одного конкретного user agent; нужно понять, какие обязательства уже возникли из-за связки сайта с Meta Business Suite.
Контекст здесь важнее одной правки в условиях. ИИ-компаниям нужен большой объём качественных данных, а редакционные материалы особенно ценны: они проходят редактуру, чаще имеют понятное авторство и лучше подходят для построения ответов, чем случайный массив текста из интернета. Издатели, напротив, всё чаще считают, что генеративный поиск и чат-боты используют их работу, но возвращают меньше переходов и рекламных показов. На этом фоне часть медиакомпаний судится с разработчиками ИИ, а часть заключает лицензионные соглашения.
Новая логика Meta может уменьшить потребность в индивидуальных переговорах с каждым владельцем сайта, если тот уже пользуется её бизнес-инструментами. Для самой площадки это удобная унификация правил. Для владельца медиа, SaaS-сервиса, интернет-магазина или корпоративного блога — ещё один пункт в карте рисков: маркетинговый канал и права на данные перестают быть независимыми вопросами.
Практический минимум для бизнеса — инвентаризировать, какие домены и поддомены команда связывала с Facebook, Instagram и Meta Business Suite. Следом стоит проверить настройки robots.txt, публичные разделы сайта, условия для авторов и клиентов, а также внутреннюю политику публикации материалов. Особое внимание нужно уделить закрытым кабинетам, документации, базам знаний и страницам, где по ошибке могут оказаться персональные данные или коммерчески чувствительная информация. Если раздел действительно не должен быть доступен извне, надёжнее ограничить доступ авторизацией, а не надеяться только на директиву для краулера.
Разработчикам и продуктовым командам полезно отделить публичный контент, который компания готова отдавать поисковым роботам, от данных, предназначенных для клиентов или партнёров. HR-командам и маркетингу — сверить, не размещаются ли в публичных вакансиях, кейсах и презентациях сведения, которые организация не хотела бы видеть в обучающих или аналитических процессах третьей стороны. Сам ИИ-скрейпинг Meta здесь не уникален: уникальна связка между доступом к рекламно-коммуникационной инфраструктуре и согласием на обработку содержимого связанных ресурсов.
Следующая развилка для рынка — не техническая, а договорная. Если крупные платформы будут закреплять доступ к веб-контенту через условия бизнес-кабинетов, издателям и компаниям придётся оценивать каждый канал продвижения ещё и как лицензию на данные. Robots.txt останется полезным инструментом управления роботами, но вопрос о том, кто и на каких условиях получает право использовать контент для обучения ИИ, всё заметнее переезжает из серверной конфигурации в юридические документы.