NICT · Crawlers d'entraînement

ICC-Crawler

Robot de l'Institut national japonais des technologies de l'information et de la communication (NICT). Les pages collectées servent à la recherche en traduction, analyse de l'information et IA, et peuvent être partagées avec des tiers pour des recherches communes.

Nom dans robots.txt

ICC-Crawler

User-agent

ICC-Crawler/3.0 (Mozilla-compatible; ; https://ucri.nict.go.jp/en/icccrawler.html)

Catégorie

Crawlers d'entraînement: Collecte les pages publiques susceptibles d'être utilisées pour entraîner des modèles d'IA.

Respecte robots.txt

Oui

Documentation officielle

https://ucri.nict.go.jp/en/icccrawler.html

Plages d'adresses IP publiées

https://ucri.nict.go.jp/en/icccrawler.html

Vérifié par rapport à la documentation officielle le 17 octobre 2026.

Le bloquer ou l'autoriser dans robots.txt

Ajoutez ces lignes au fichier robots.txt situé à la racine de votre domaine. Pour le bloquer partout :

User-agent: ICC-Crawler
Disallow: /

Pour l'autoriser partout sauf dans un dossier :

User-agent: ICC-Crawler
Disallow: /private/

S'agit-il vraiment de ce bot ?

N'importe qui peut copier un user-agent. Pour vous assurer qu'une requête provient de NICT, comparez son adresse IP avec les plages publiées par l'entreprise.