Webz.io · Crawlers de treino

Webzio-Extended

Marca os dados recolhidos pela Webz.io como utilizáveis ou não para treino de IA e aprendizagem automática. A Webz.io vende dados web a outras empresas; bloquear este agente indica que o seu conteúdo não deve ser oferecido para treino de IA.

Nome no robots.txt

Webzio-Extended

User agent

Webzio-Extended

Categoria

Crawlers de treino: Recolher páginas públicas que podem ser utilizadas para treinar modelos de IA.

Respeita o robots.txt

Sim

Documentação oficial

https://webz.io/blog/company/from-omgilibot-to-the-webzbot-duo-a-powerful-leap-for-ethical-and-comprehensive-data-collection/

Verificado com a documentação oficial em 17 de outubro de 2026.

Bloqueie ou permita no robots.txt

Adicione estas linhas ao ficheiro robots.txt na raiz do seu domínio. Para bloquear em todo o lado:

User-agent: Webzio-Extended
Disallow: /

Para o permitir em todo o lado exceto numa pasta:

User-agent: Webzio-Extended
Disallow: /private/

É realmente este bot?

Qualquer pessoa pode copiar um user agent e a Webz.io não publica intervalos de IP para este bot. Uma pesquisa de DNS inverso do endereço IP pode ajudar; consulte a documentação oficial.

Outros bots da Webz.io

• omgili · Outros bots de IA