A nova configuração Disallow AI Training resolve um problema envolvendo os chamados mixed-use crawlers, usados tanto para indexação quanto para treinamento, e que agora passam a ser classificados separadamente pelo comportamento. Apple, Google e Microsoft se comprometeram a atender a esses requisitos com seus bots.

Cloudflare permite que sites bloqueiem uso de seus conteúdos para treinar IA sem perder a indexação em mecanismos de busca

A nova configuração Disallow AI Training resolve um problema envolvendo os chamados mixed-use crawlers, usados tanto para indexação quanto para treinamento, e que agora passam a ser class...