É só ir em Segurança, depois em Bots e ativar a opção Scrapers e crawlers de IA. Contas gratuitas também têm acesso à novidade.
Diferentemente do robots.txt, a solução da Cloudflare usa um modelo de aprendizado de máquina que “sempre detecta essa atividade [disfarçada de acesso humano] como um robô, mesmo quando os operadores mentem sobre seu ‘user agent’”.
Eu não consigo pensar em qualquer vantagem em deixar que empresas com fins comerciais, como Google, Meta e OpenAI, raspem conteúdo alheio. Para quem usa a CDN da Cloudflare, ativar isso é fácil e ajuda a mitigar esse tipo de ataque.
1 comentário
é bom mas na prática eles já roubaram tudo que precisavam, agora é só fechar uma ou duas parcerias que tudo continua alimentado…