Meta · Trainings-Crawler

Meta-ExternalAgent

Crawlt das Web etwa zum Training von Metas KI-Basismodellen oder um Produkte durch direktes Indexieren von Inhalten zu verbessern. Wer ihn blockiert, bleibt aus diesem Crawl heraus.

robots.txt-Name

meta-externalagent

User-Agent

meta-externalagent/1.1

Kategorie

Trainings-Crawler: Erfasst öffentliche Seiten, die zum Trainieren von KI-Modellen verwendet werden können.

Befolgt robots.txt

Ja

Offizielle Dokumentation

https://developers.facebook.com/docs/sharing/webmasters/web-crawlers/

Geprüft anhand der offiziellen Dokumentation am 17. Oktober 2026.

In robots.txt blockieren oder zulassen

Fügen Sie diese Zeilen in die Datei robots.txt im Stammverzeichnis Ihrer Domain ein. Um ihn überall zu blockieren:

User-agent: meta-externalagent
Disallow: /

Um ihn überall außer in einem Ordner zuzulassen:

User-agent: meta-externalagent
Disallow: /private/

Handelt es sich wirklich um diesen Bot?

Jeder kann einen User-Agent kopieren, und Meta veröffentlicht keine IP-Bereiche für diesen Bot. Ein Reverse-DNS-Lookup der IP-Adresse kann helfen; prüfen Sie die offizielle Dokumentation.

Andere Bots von Meta

• Meta-ExternalFetcher · KI-Antworten
• Meta-WebIndexer · Suchindizes