
Os dados em tempo real recolhidos pela Cloudflare Radar a 4 de junho mostram que 34,1% do tráfego HTTP global é gerado por bots, enquanto 65,9% é gerado por pessoas; a Cloudflare indica que a taxa de crescimento do tráfego automatizado é cerca de 8 vezes a do tráfego humano. Os web crawlers de IA representam cerca de 22% de todo o tráfego de bots e são a segunda maior categoria, apenas atrás dos crawlers dos motores de busca.
Distribuição da quota dos crawlers de IA: Meta-ExternalAgent ultrapassa o GPTBot
(Fonte:Cloudflare Radar)
As quotas dos principais crawlers de IA nos dados da Cloudflare são:
Meta-ExternalAgent:cerca de 16,3%, já ultrapassou o GPTBot e tomou o primeiro lugar
ClaudeBot:cerca de 11,6%
Applebot:salto acentuado de 140% num mês, passando de cerca de 2,97% para 7,15%; a Cloudflare classifica isto como um sinal de que o Apple Intelligence está a aumentar a intensidade da recolha de dados
GPTBot:já foi ultrapassado pelo Meta-ExternalAgent (quota exata varia)
A Cloudflare explica que os números de relatórios diferentes podem variar; os dados acima devem ser vistos como orientação de tendência e não como uma classificação rigorosa.
Tentativas de login e estrutura do tráfego global
Os dados da Cloudflare indicam que, nas tentativas de login, 94% são originadas por bots. Os dispositivos móveis representam 55,4% do tráfego global e os computadores de secretária 44,6%. A Cloudflare esclarece que os 34,1% do tráfego de bots não equivalem, necessariamente, a tráfego malicioso; este inclui várias categorias, como spiders de motores de busca, ferramentas de monitorização da rede, serviços de integração de APIs e crawlers de IA. Entre os crawlers de IA, os crawlers de treino (ou seja, os que recolhem dados para treino de modelos a longo prazo) representam mais de 51,5%, e o restante corresponde aos crawlers de resposta em tempo real (utilizados para responder a consultas dos utilizadores em tempo real).
Perguntas frequentes
Que tipos de tráfego de bots estão incluídos nos 34,1% da Cloudflare?
Com base nos dados da Cloudflare Radar, o tráfego de bots de 34,1% inclui spiders de motores de busca, crawlers de treino de IA, ferramentas de monitorização da rede, serviços de integração de APIs e programas de ataques maliciosos, entre outros tipos. Os crawlers de IA representam cerca de 22% do tráfego de bots, sendo a segunda maior categoria.
O crescimento de 140% do Applebot num único mês representa o quê?
Os dados da Cloudflare mostram que o Applebot aumentou de cerca de 2,97% para 7,15% no espaço de um mês, o que corresponde a uma subida de 140%. A Cloudflare interpreta isto como um sinal de que o Apple Intelligence está a intensificar a recolha de dados de páginas web.
A previsão de 2027 do CEO da Cloudflare, Matthew Prince, é um facto confirmado?
Não. A afirmação de Matthew Prince de que “o tráfego de bots ultrapassará o tráfego humano em 2027” é uma previsão pública pessoal e a Cloudflare esclarece de forma explícita, no texto original, que “é uma previsão, não um facto já consumado”. No momento, os dados confirmados são a quota de 34,1% do tráfego de bots e a taxa de crescimento do tráfego automatizado, que é cerca de 8 vezes a do tráfego humano.