Tag: bots

Como os robos rastreadores / bots impactam as operações dos projetos da Wikimedia

Enquanto leitores humanos tendem a focar em tópicos específicos – geralmente similares –, robôs rastreadores tendem a “ler em massa” um número maior de páginas e visitar também as páginas menos populares. Isso significa que esses tipos de solicitações têm mais probabilidade de serem encaminhadas para o datacenter principal, o que as torna muito mais caras em termos de consumo de nossos recursos. 

Ao passar por uma migração de nossos sistemas, notamos que apenas uma fração do tráfego caro que chegava aos nossos datacenters principais estava se comportando como os navegadores da web normalmente fariam, interpretando o código javascript. Quando olhamos mais de perto, descobrimos que pelo menos 65% desse tráfego que consome recursos que obtemos para o site vem de bots, uma quantidade desproporcional, dado que as visualizações de página gerais de bots são cerca de 35% do total. 

#Wikipedia #Bots

via Diff

Disponível em: https://diff.wikimedia.org/2025/04/01/how-crawlers-impact-the-operations-of-the-wikimedia-projects/

Raspadores de IA estão detonando a Wikipédia com custos de servidor

Raspadores que coletam dados para treinamento de modelos de inteligência artificial estão aumentando o tráfego da Wikipédia e sobrecarregando os servidores da organização, afirmou a Wikimedia, fundação que administra a enciclopédia online.

Desde janeiro de 2024 houve um aumento de 50% no tráfego de downloads de conteúdo multimídia da Wikimedia Commons, a plataforma de mídia livre da Wikipédia. No entanto, esse crescimento não vem de leitores humanos, mas sim de programas automatizados que raspam o catálogo de imagens para alimentar modelos de inteligência artificial.

#Bots #Wikipédia

via Núcleo

Disponível em: https://nucleo.jor.br/curtas/2025-04-02-raspadores-de-ia-estao-sobrecarregando-wikimedia/