Meta · KI-Antworten

Meta-ExternalFetcher

Ruft einzelne Links auf Anfrage eines Nutzers ab und unterstützt Metas KI-Agenten, etwa wenn eine KI Websites aufruft, um Aufgaben zu erledigen.

robots.txt-Name

meta-externalfetcher

User-Agent

meta-externalfetcher/1.1

Kategorie

KI-Antworten: Ruft eine Seite ab, wenn jemand einen Assistenten danach fragt.

Befolgt robots.txt

Teilweise. Laut Meta kann er die robots.txt umgehen, weil er vom Nutzer angeforderte Abrufe ausführt.

Offizielle Dokumentation

https://developers.facebook.com/docs/sharing/webmasters/web-crawlers/

Geprüft anhand der offiziellen Dokumentation am 17. Oktober 2026.

In robots.txt blockieren oder zulassen

Fügen Sie diese Zeilen in die Datei robots.txt im Stammverzeichnis Ihrer Domain ein. Um ihn überall zu blockieren:

User-agent: meta-externalfetcher
Disallow: /

Um ihn überall außer in einem Ordner zuzulassen:

User-agent: meta-externalfetcher
Disallow: /private/

Dieser Bot befolgt robots.txt nicht immer. Um ihn zuverlässig fernzuhalten, blockieren Sie ihn auf Ihrem Server oder Ihrer Firewall nach User-Agent und, sofern veröffentlicht, nach IP-Bereich.

Handelt es sich wirklich um diesen Bot?

Jeder kann einen User-Agent kopieren, und Meta veröffentlicht keine IP-Bereiche für diesen Bot. Ein Reverse-DNS-Lookup der IP-Adresse kann helfen; prüfen Sie die offizielle Dokumentation.

Andere Bots von Meta

• Meta-WebIndexer · Suchindizes
• Meta-ExternalAgent · Trainings-Crawler