Patreon para de pedir que bots de IA não façam raspagem e passa a bloqueá-los

Patreon, a plataforma de assinaturas para criadores, está adotando medidas rigorosas contra a raspagem de seu conteúdo por IA para fins de treinamento. Na quinta-feira, a empresa compartilhou que está trabalhando com a provedora de infraestrutura de internet Cloudflare para bloquear diretamente o acesso de robôs de IA projetados para treinar seus modelos de IA com o trabalho de criadores sem permissão.

As medidas reforçadas foram necessárias porque a raspagem por IA se tornou mais sofisticada desde que a empresa implementou medidas iniciais para deter rastreadores de IA em 2023, afirma a empresa. Além disso, o paywall do Patreon há muito tempo mantém grande parte do conteúdo dos criadores fora do alcance dos rastreadores. Mas, mais recentemente, a empresa introduziu novas ferramentas de descoberta, como um Feed Inicial przeprojecionado e seus Quips semelhantes a tweets, que poderiam expor mais conteúdo aos rastreadores.

As mudanças ocorrem no momento em que mais editores online e criadores de conteúdo estão compreendendo como a IA está ingerindo seu trabalho com o objetivo de tornar seus modelos de IA mais inteligentes. Para combater isso, a Cloudflare agora oferece ferramentas que permitem aos editores de sites restringir robôs de IA, incluindo um mercado que permite aos sites cobrar de robôs de IA pela raspagem, batizado de Pay Per Crawl. No início deste mês, ela alterou suas políticas para que os rastreadores de "uso misto", ou seja, aqueles que indexam e treinam com o conteúdo de um site, sejam bloqueados por padrão em qualquer página que hospede anúncios.

O Patreon diz que está ampliando seu trabalho atual com a Cloudflare para usar a tecnologia AI Crawl Control da empresa a fim de atualizar suas políticas de IA e ferramentas de aplicação. A diferença aqui é que, em vez de simplesmente pedir aos rastreadores de IA que não raspem o conteúdo usando os arquivos robots.txt — uma forma padrão de fornecer instruções aos robôs sobre como eles podem usar seu site — o Patreon agora está bloqueando ativamente os robôs de treinamento de IA.

“O consentimento não deve depender de um raspador decidir se comportar,” explica uma postagem no blog do Patreon, fazendo referência às medidas mais rigorosas.

Ao testar os recursos, as tentativas semanais de rastreadores individuais de treinamento de IA para acessar o Patreon caíram de “milhares de tentativas para zero”, observou a postagem. Isso indica que os raspadores de IA estavam ignorando o arquivo robots.txt do Patreon e raspando o site de qualquer maneira, apesar de seus pedidos.

No entanto, a empresa afirmou que permitirá robôs que indexam páginas e organizam informações que podem ser usadas para enviar usuários de volta ao Patreon.

“À medida que os agentes de IA se tornam cada vez mais poderosos e populares, os criadores merecem ter uma voz significativa sobre como seu trabalho é usado pelas empresas de IA,” comentou o chefe de produtos do Patreon, Drew Rowny, no anúncio. “Na maior parte da Internet, os criadores precisam aceitar o treinamento de IA em seu trabalho apenas para alcançar e expandir um público. O Patreon tem uma visão diferente: os criadores devem poder expandir seu público e controlar como seu trabalho é usado.”