Meta и скрапинг новостей: юристы не верят правкам
Meta убрала слово «train» из бизнес-условий после скандала, но юристы предупреждают: права на скрапинг новостных сайтов никуда не делись.
Meta обновила условия — но юристы не успокоились
Meta убрала слово «train» из новых коммерческих условий для бизнес-аккаунтов после того, как Nieman Lab опубликовал расследование: условия разрешали широкий скрапинг сайтов, «связанных» с бизнес-аккаунтами, и потенциально позволяли использовать собранный контент для обучения AI-моделей. Однако правоведы считают, что принципиально ничего не изменилось. По их оценке, пересмотренные условия по-прежнему допускают масштабный скрапинг сайтов, потенциально перекрывая robots.txt.
Что разрешали исходные условия
Ключевой абзац первоначальной версии условий прямо разрешал Meta использовать «автоматизированное программное обеспечение (включая веб-скраперы, боты, роботы, пауки, краулеры и пользовательские агенты)» для доступа, индексирования, кэширования, анализа и сбора данных с доменов, веб-страниц и URL, «связанных с продуктами или услугами» бизнеса.
Первая версия условий, о которой Nieman Lab сообщил 15 октября, позволяла Meta использовать собранный контент для «обучения» своих продуктов без ограничений рекламными нуждами. Практически каждое крупное СМИ имеет хотя бы один бизнес-аккаунт в Meta — а значит, потенциально тысячи редакций по всему миру оказывались под действием этой формулировки.
Правки есть — опасения остаются
В пересмотренной версии, опубликованной в пятницу, Meta убрала слово «train» из списка допустимых вариантов использования и ограничила эти варианты «рекламными и бизнес-продуктами» вместо всех продуктов Meta.
Однако юристы настроены скептически.
«Пересмотренная версия новых условий по-прежнему позволяет Meta использовать скрапированный контент для разработки любого “бизнес-продукта”. Это не выглядит как определённый термин, и Meta, по всей видимости, разрабатывает AI-продукты для бизнеса. Думаю, “разработка” достаточно широка, чтобы включать “обучение”.»
— Мэтт Топик, адвокат в области медиа и интеллектуальной собственности, Loevy & Loevy
Meta не включила в пересмотренные условия никаких конкретных формулировок об уважении предпочтений robots.txt. Джеймс Гриммельманн, профессор цифрового и информационного права Корнельской школы права, заявил, что правки «ничего не ограничивают» в части формулировки «связанные с вашими продуктами или услугами».
Robots.txt: защита без гарантий
Robots.txt — текстовый файл на сервере сайта, который указывает поисковым роботам и краулерам, какие страницы им разрешено сканировать. Исторически это де-факто стандарт взаимодействия сайтов с поисковыми системами вроде Google.
Хотя представители Meta заявляют, что изменения «не дают новых прав на обход» предпочтений robots.txt, сам по себе robots.txt юридически не обязателен — и AI-компании регулярно игнорируют его инструкции.
Бенджамин Собель, профессор права Университета Висконсин, сравнил структуру условий с практикой принудительной увязки в антимонопольном праве: продолжение использования бизнес-продуктов Meta требует принятия разрешений на скрапинг.
Позиция Meta
Пресс-секретарь Meta Даниэль Робертс заявил, что изменения не затрагивают существующую практику сканирования компании и что владельцы сайтов могут по-прежнему использовать инструкции robots.txt для указания своих предпочтений по доступу.
Представитель компании также сообщил Nieman Lab, что обновление консолидирует формулировки о краулинге, ранее разбросанные по другим условиям использования, и что оно не изменит то, как Meta сканирует сайты издателей в дальнейшем.
Что могут сделать издатели прямо сейчас
Meta документирует отдельные краулеры: для рекламы (meta-externalads) и для обучения AI-моделей (meta-externalagent).
| Краулер Meta | Назначение | Реагирует на robots.txt |
|---|---|---|
meta-externalagent | Обучение AI-моделей / индексирование | Да (по документации Meta) |
meta-externalads | Реклама и бизнес-продукты | Да (по документации Meta) |
meta-webindexer | Улучшение поиска Meta AI | Да (по документации Meta) |
Хронология событий
| Дата | Событие |
|---|---|
| 6 марта 2024 | Предыдущая версия коммерческих условий Meta |
| 14 октября 2026 | Первое публичное обсуждение новой формулировки |
| 15 октября 2026 | Nieman Lab публикует анализ юристов |
| 17 октября 2026 | Meta убирает слово «train», сужает использование данных |
| 22 октября 2026 | The Verge: юристы по-прежнему обеспокоены |
| 30 октября 2026 | Новые условия вступают в силу |
Почему это важно для всей отрасли
Скандал обнажил системную проблему: крупные разработчики AI расширяют права на обучающие данные тихо — через обновления контрактов, а не через переговорные лицензионные сделки. Издательские ассоциации требуют юридически однозначных формулировок, пока безрезультатно.
Robots.txt как индустриальный стандарт защиты контента работает лишь до тех пор, пока AI-компании добровольно его соблюдают. А добровольность — это не гарантия.
Если тема AI и авторских прав на данные вам интересна, читайте также наш материал об исках издателей против OpenAI и Google и разбор того, как работает лицензирование контента для обучения AI.