Платформа Patreon, предназначенная для монетизации контента создателями, переходит от уговоров к блокировке AI-скрейперов. Вместо того чтобы просто просить ботов не собирать данные через robots.txt, компания начала активно блокировать их с помощью технологий Cloudflare. Как сообщается в блоге Patreon, AI-скрейперы игнорировали старые ограничения, совершая тысячи попыток доступа в неделю — теперь их число снизилось до нуля.
Почему Patreon пошёл на жёсткие меры
AI-скрейпинг стал гораздо изощрённее с 2023 года, когда Patreon впервые ввёл защитные механизмы. Платёжный шлюз Patreon долгое время защищал контент от краулеров, но новые функции, такие как обновлённая лента Home Feed и посты Quips, открыли больше данных для AI.
Cloudflare теперь предлагает инструменты для ограничения AI-ботов, включая маркетплейс Pay Per Crawl, где сайты могут взимать плату за скрейпинг. Patreon использует технологию AI Crawl Control для активной блокировки тренировочных ботов, оставляя доступ только тем, кто индексирует контент для перенаправления пользователей обратно на платформу.
Что изменилось технически
Вместо пассивного robots.txt Patreon перешёл к активной блокировке на уровне инфраструктуры. AI-тренировочные боты теперь не могут получить доступ к контенту, даже если игнорируют стандартные инструкции. Patreon уточняет: «Согласие не должно зависеть от того, решит ли скрейпер вести себя хорошо».
При тестировании еженедельные попытки доступа отдельных AI-ботов упали с тысяч до нуля.
Позиция Patreon и реакция рынка
Дрю Роуни, продуктовый директор Patreon, заявил: «Создатели заслуживают права голоса в том, как их работы используются AI-компаниями. Наше видение — рост аудитории без принудительного обучения AI».
Это часть глобального тренда: всё больше издателей и контент-мейкеров осознают, что AI поглощает их контент для обучения моделей. Cloudflare недавно изменил политику, блокируя по умолчанию «смешанные» краулеры на страницах с рекламой.
Часто задаваемые вопросы
Блокирует ли Patreon всех ботов?
Нет. Разрешены боты, которые индексируют страницы и перенаправляют пользователей обратно на Patreon. Заблокированы только те, что тренируют AI-модели без разрешения.
Как это влияет на создателей?
Создатели теперь защищены от несанкционированного использования их работ для обучения AI. Они могут развивать аудиторию, не опасаясь, что контент будет скрейпиться без спроса.
Что такое Pay Per Crawl от Cloudflare?
Это маркетплейс, где владельцы сайтов могут взимать плату с AI-ботов за скрейпинг. Patreon пока не использует эту модель, но активно блокирует несанкционированный доступ.
Patreon демонстрирует, что даже крупные платформы могут эффективно защищать контент без компромиссов. Если вы создатель, задумайтесь: как ваши работы используются AI? Patreon предлагает альтернативу — контроль и уважение к вашему труду.