Anmerkung R3
Domain blockiert durch robots.txt
Die angefragte Domain verweigert uns über die robots.txt den Zugriff.
Bei der Überprüfung der Domain wurde festgestellt, dass unser Zugriff über die robots.txt
-Datei verweigert wird.
Beschreibung
Bei der Erstellung neuer Berichte müssen diverse Regulierungen beachtet werden. Dazu gehört auch, dass Berichte für Domains abgelehnt werden, die uns den Zugriff über die robots.txt-Datei verweigern.
Vorgehensweise
Sollten Sie der Meinung sein, dass der Zugriff fälschlicherweise verweigert wird, prüfen Sie bitte die folgenden Einstellungen:
- Die Datei
/robots.txt
sollte keine Regelung für unserenUser-agent: SetupReportAnalyzerBot
enthalten. - Die Ziel-URL des Berichts sollte keinen
X-Robots-Tag
-Header enthalten, der uns den Zugriff verweigert.