Homepage selbermachen 7.851 Themen, 35.616 Beiträge

Der Googlebot wird durch robots.txt blockiert

mudsharkz / 7 Antworten / Flachansicht Nickles

Ich habe meine webseite mobilgeräte tauglich gemacht und folgende robots.txt:

User-agent: Googlebot
Allow: .js
Allow: .css

und dann mit der google Testseite getestet:

https://search.google.com/search-console/mobile-friendly?utm_source=mft&utm_medium=redirect&utm_campaign=mft-redirect&hl=de

Ich erhalte dann nachfolgende Meldung:

Frage: Stimmt meine robots.txt oder dauert das noch bis google die neue robots.txt erkennt ? ich hab sie vor knapp 20 Stunden erstellt.

Die fragliche Zeile die hier beanstandet wird ist die einblendung für Google Werbung

das hier ist die fehlermeldung:

Eine Seitenressource konnte nicht geladen werden

Ressource Typ Status
https://pagead2.googlesyndication.com/pagead/js/adsbygoogle.js Skript Der Googlebot wird durch robots.txt blockiert
bei Antwort benachrichtigen
gelöscht_101060 mudsharkz „Der Googlebot wird durch robots.txt blockiert“
Optionen

Servus,

das dürfte ein Logikfehler sein - du erlaubst hier ja nur für den Bot mit dem namen Googlebot die Indizierung von 2 Dateien, nämlich .js und .css; den Rest verwehrst du!

Korrekt ist es, wenn du in der Robots.txt festlegst, welche Verzeichnisse bzw. Datein darin nicht indiziert werden soll - wie das geht, steht ganz gut unter https://wiki.selfhtml.org/wiki/Grundlagen/Robots.txt

BG, Bergi2002

bei Antwort benachrichtigen