X-Robots-Tag-Checker
Der X-Robots-Tag-Header kann Indexierung blockieren, auch wenn das HTML unauffällig wirkt.
Wo wird X-Robots-Tag oft gesetzt?
Auf CDN-Ebene (Cloudflare, Fastly), in nginx/apache-Konfiguration oder durch WordPress-Plugins. Nach Server-Umzügen bleiben alte Header-Regeln manchmal aktiv.
X-Robots-Tag in der Praxis
Besonders tückisch: noindex nur im Header, während Meta-Robots index erlaubt. Google folgt dem restriktiveren Signal. Der Checker zeigt beide Werte nebeneinander.
Häufige Fragen
Was ist der X-Robots-Tag?
Ein HTTP-Response-Header, den der Server sendet. Er kann noindex, nofollow und weitere Direktiven setzen, ohne dass sie im HTML sichtbar sind.
Warum ist X-Robots-Tag schwer zu finden?
Im Browser-Quelltext fehlt er. Nur die Response-Header zeigen den Wert. CDN-Konfigurationen, Caching-Layer oder Reverse Proxies setzen ihn oft.
Unterschied zu Meta-Robots?
Beide steuern Indexierung. X-Robots-Tag wirkt auf HTTP-Ebene und kann auch Nicht-HTML-Dateien betreffen. Wenn beide gesetzt sind, gilt der restriktivere Wert.