Crawler auswählen
Verwende robots für Crawler allgemein oder Googlebot für eine Google-spezifische Direktive.
Erstelle Robots-Meta- und X-Robots-Tag-Direktiven für alle Crawler oder Googlebot.
Dein Ergebnis erscheint hier
Erstelle Robots-Meta- und X-Robots-Tag-Direktiven für alle Crawler oder Googlebot.
So funktioniert es
Verwende robots für Crawler allgemein oder Googlebot für eine Google-spezifische Direktive.
Wähle index oder noindex, follow oder nofollow sowie optional nosnippet und max-image-preview.
Kopiere das Meta-Element in den Seiten-Head oder sende X-Robots-Tag als HTTP-Antwort-Header. Diese Änderung musst du selbst auf deiner Website vornehmen.
FAQ
1. Crawler auswählen: Verwende robots für Crawler allgemein oder Googlebot für eine Google-spezifische Direktive. 2. Direktiven für Indexierung und Vorschau festlegen: Wähle index oder noindex, follow oder nofollow sowie optional nosnippet und max-image-preview. 3. Generierte Direktive hinzufügen: Kopiere das Meta-Element in den Seiten-Head oder sende X-Robots-Tag als HTTP-Antwort-Header. Diese Änderung musst du selbst auf deiner Website vornehmen.
Die Direktive bittet kompatible Crawler, eine erreichbare Seite nicht zu indexieren. Der Crawler muss die Seite abrufen können, um Meta-Tag oder Header zu lesen. Der Zugriff wird dadurch nicht verhindert und der Inhalt nicht geschützt.
Ja. Ein Robots-Meta-Element gehört in den Seiten-Head. X-Robots-Tag wird als HTTP-Antwort-Header gesendet und kann auch für Nicht-HTML-Dateien gelten.
Nein. Crawler müssen Direktiven nicht befolgen und Änderungen im Index können dauern. Die Seite muss erreichbar bleiben, solange ein Crawler noindex lesen muss.
Weiterarbeiten
Erstelle einen sofort nutzbaren HTML-Link-Code.
Erstelle aus einer URL-Liste eine gültige XML-Sitemap.
Prüfe das Sitemap-XML, zähle URLs und erkenne fehlerhafte oder unsichere Einträge.
Untersuche und klassifiziere Links im eingefügten HTML-Code.
Schätze die Kampagnenkosten anhand von Klicks und CPC.
Prüft näherungsweise, ob eine Domain in DuckDuckGo erscheint, und öffnet Google- und Bing-Suchen zur manuellen Kontrolle. Es wird kein Rankingverlauf gespeichert.