Meta · Réponses IA

Meta-ExternalFetcher

Récupère des liens précis à la demande d'un utilisateur et sert les fonctions d'IA agentique de Meta, par exemple pour aider une IA à naviguer sur des sites afin d'accomplir des tâches.

Nom dans robots.txt

meta-externalfetcher

User-agent

meta-externalfetcher/1.1

Catégorie

Réponses IA: Récupère une page lorsqu'une personne interroge un assistant à son sujet.

Respecte robots.txt

Partiellement. Meta indique qu'il peut contourner le robots.txt, car il effectue des requêtes demandées par l'utilisateur.

Documentation officielle

https://developers.facebook.com/docs/sharing/webmasters/web-crawlers/

Vérifié par rapport à la documentation officielle le 17 octobre 2026.

Le bloquer ou l'autoriser dans robots.txt

Ajoutez ces lignes au fichier robots.txt situé à la racine de votre domaine. Pour le bloquer partout :

User-agent: meta-externalfetcher
Disallow: /

Pour l'autoriser partout sauf dans un dossier :

User-agent: meta-externalfetcher
Disallow: /private/

Ce bot ne respecte pas toujours robots.txt. Pour l'exclure à coup sûr, bloquez-le sur votre serveur ou pare-feu par user-agent et, lorsqu'elles sont publiées, par plage d'adresses IP.

S'agit-il vraiment de ce bot ?

N'importe qui peut copier un user-agent, et Meta ne publie pas de plages d'adresses IP pour ce bot. Une recherche DNS inverse de l'adresse IP peut vous aider ; consultez la documentation officielle.

Autres bots de Meta

• Meta-WebIndexer · Index de recherche
• Meta-ExternalAgent · Crawlers d'entraînement