Webz.io · Crawler per l'addestramento

Webzio-Extended

Contrassegna i dati raccolti da Webz.io come utilizzabili o no per l'addestramento di IA e machine learning. Webz.io vende dati web ad altre aziende; bloccare questo agente indica che i tuoi contenuti non vanno offerti per l'addestramento.

Nome in robots.txt

Webzio-Extended

User agent

Webzio-Extended

Categoria

Crawler per l'addestramento: Raccoglie pagine pubbliche che potrebbero essere usate per addestrare modelli IA.

Rispetta robots.txt

Sì

Documentazione ufficiale

https://webz.io/blog/company/from-omgilibot-to-the-webzbot-duo-a-powerful-leap-for-ethical-and-comprehensive-data-collection/

Verificato con la documentazione ufficiale il 17 ottobre 2026.

Bloccalo o autorizzalo in robots.txt

Aggiungi queste righe al file robots.txt nella radice del tuo dominio. Per bloccarlo ovunque:

User-agent: Webzio-Extended
Disallow: /

Per autorizzarlo ovunque tranne in una cartella:

User-agent: Webzio-Extended
Disallow: /private/

Si tratta davvero di questo bot?

Chiunque può copiare uno user agent e Webz.io non pubblica gli intervalli IP per questo bot. Un controllo DNS inverso dell'indirizzo IP potrebbe essere d'aiuto; verifica la documentazione ufficiale.

Altri bot di Webz.io

• omgili · Altri bot IA