Menu
Net Tec Internet Agentur
Beratung und Hilfe zum Thema Suchmaschinenoptimierung
  • Home
  • SEO Angebot
  • Leistungen
    • Suchmaschinenoptimierung
    • Seo-Beratung
    • Google Ads Kampagnen
    • Link Profil Analyse
    • Corporate Blogs
    • Infocharts
    • Gestaltung
  • Über uns
  • Blog
    • SEO-Tipps
    • Google
    • WordPress
    • SEO-News
    • Statistik
    • Infografiken
    • Lexikon
  • Impressum
    • Datenschutz
    • Kontakt
Close Menu
  1. Startseite
  2. WordPress generiert robots.txt Datei – leider nicht optimal für Google

WordPress generiert robots.txt Datei – leider nicht optimal für Google

WordPress ist an sich ein Blogsystem, das schon sehr viel richtig macht, wenn es um die Optimierung für die Suchmaschine Google geht. Leider gibt es aber eine Kleinigkeit, die Google jetzt weniger gut findet: Seit der WordPress Version 3.6.1 liefert ein WordPress-Blog automatisch eine robots.txt Datei aus, die es selbst generiert, wenn der User keine im Root-Verzeichnis angelegt hat. An sich eine gute Idee, aber damit haben seit einigen Wochen viele Webmaster eine Google-Fehlermeldung in der Google Search Console (früher Google Webmastertools) erhalten, die sie sich nicht erklären können.

Google Warnmeldung robots.txt
Google meldet eine Warnmeldung, weil der Zugriff auf Teile der Webseite durch die WordPress-generierte robots.txt Datei gesperrt ist.

Wortlaut der Meldung in der Search Console

Der Googlebot kann nicht auf CSS- und JS-Dateien auf https://www.nt-seo.de/ zugreifen
An: Webmaster von https://www.nt-seo.de
Die Google-Systeme haben kürzlich ein Problem mit Ihrer Startseite festgestellt, das sich auf das Rendern und lndexieren Ihrer Inhalte durch unsere Algorithmen auswirkt. Der Googlebot kann aufgrund von Beschränkungen in Ihrer robots.txt-Datei nicht auf Ihre JavaScript- und/oder CSS-Dateien zugreifen. Anhand dieser Dateien kann Google feststellen, ob Ihre Website ordnungsgemäß funktioniert. Wenn Sie den Zugriff auf diese Dateien blockieren, kann dies zu schlechteren Rankings führen.

Warum nun die Warnmeldung von Google?

Die Meldung von Google erscheint, weil die von WordPress generierte robots.txt-Datei bestimmte Ressourcen und Pfade für den Google-Bot sperrt:

User-agent: *
Disallow: /wp-admin/
Disallow: /wp-includes/

Durch diese Einträge werden Ressourcen im Ordner wp-includes gesperrt. Dies betrifft auch .js und .css Dateien, die Google gerne crawlen würde.

Schlechte Rankings wegen robots.txt?

Man kann es kaum glauben, aber Google “droht” mit schlechten Rankings, wenn man in seiner robots-Datei Ressourcen wie .css und .js Dateien sperrt. Der Grund dafür ist vermutlich, dass einige Backhat-Optimierer in diesen Dateien Tricks einbauen, um SEO-Texte oder Linklisten unsichtbar zu machen. Bei den meisten WordPress-Nutzern dürfte dies aber nicht der Fall sein. Trotzdem muss man mit schlechteren Google-Rankings rechnen, wenn man die Dateiendungen weiterhin für den Google-Bot sperrt.

Lösung: WordPress aktualisieren oder robots.txt anlegen

Nun gibt es zwei Möglichkeiten, das Problem zu beheben. Möglichkeit eins ist, dass man auf eine aktuelle Version von WordPress aktualisiert. Soweit ich sehen konnte, wird ab WordPress 4.2.4 nur noch der Pfad “wp-admin” in der robots.txt gesperrt. Damit sollte die Warnmeldung auch erledigt sein.

Lösung zwei ist das Anlegen einer robots.txt im Hauptverzeichnis der Webseite. Ich habe dies vorgezogen, um vor zukünftigen Überraschungen sicher zu sein – wer weiss, ob sich die von WordPress automatisch generierte Datei nicht doch irgendwann mal wieder ändert und Fehler hervorruft? Ich habe aus dem Grund in den Webseiten meiner Kunden die Datei robots.txt angelegt und einfach leer gelassen. Damit kann Google auf die komplette Webseiten zugreifen.

Die Fehlermeldung kann man dann in der Google Search Console als erledigt markieren.

Jens Kleinholz - Inhaber Net-TEc Internet Solutions

Über mich

Seit über 20 Jahren betreue ich kleine und mittelständische Unternehmen im Bereich Online-Marketing. Mein Ziel ist es, die Kunden persönlich zu betreuen und individuell zu beraten. Nur so ist es möglich, mit Suchmaschinenoptimierung, Content-Marketing und Google Adwords das Maximum aus dem eingesetzten Kundenbudget heraus zu holen.

Nutzen Sie meine kostenlose Beratung und erfahren Sie noch heute, wie ich Ihr Online-Business durch erfolgreiches und seriöses Suchmaschinenmarketing in Schwung bringen kann!

Jetzt unverbindlich anfragen
056217809967
Jetzt anfragen
05621 - 7809967

Weitere Artikel im Seo Blog

Google Pagerank

Google-Pagerank in der Toolbar ist tot – alte SEO-Metrik ist nun tatsächlich überholt

Ich habe ja vor kurzem schon darüber sinniert, wann wohl das nächste Pagerank Update von Google durchgewunken wird und bin zu dem Schluss gekommen, dass die Anzeige des PR von Google immer weniger gewollt ist. Das letzte sichtbare Update war im Dezember 2013 und in 2014 ist noch kein einziges Update erfolgt. Dafür gibt es […]

Branchenbücher, die mit List Local zusammenarbeiten

Branchenbucheintrag bei List Local: Welche Wirkung hat er für SEO?

Ich habe vor einigen Monaten eine Eintragung einer Webseite bei dem Branchenbuch-Eintragsservice “List Local” von 1&1 genutzt. Interessant ist dieser Dienst für mich, weil er zum einen gleich eine ganze Reihe an Branchenbüchern abdeckt, die man sonst mühsam einzeln per Hand abarbeiten müsste und zum anderen, weil auch einige Dienst dabei sind, die keine manuellen […]

Umleitung mit htaccess - Subdomain auf Unterordner

Umleitung einer Subdomain in einen Ordner mit .htaccess

Die .htaccess-Datei ist für Umleitungen immer das beste Mittel der Wahl. Mit dem HTTP-Status Code kann man Google auch darauf hinweisen, dass die Umleitung permanent ist, so dass eventuell gesetzte Links auch auf die neue URL geleitet werden und das Ranking nicht einbricht. Praxisbeispiel für die Umleitung der Subdomain Im aktuellen Fall war eine Umleitung […]

default

Wie erkenne ich eine seriöse SEO-Agentur bzw. ein seriöses SEO-Angebot?

Wenn man bei Google nach dem Begriff “SEO-Agentur” oder “Suchmaschinenoptimierung” recherchiert, dürfte man als potentieller Auftraggeber reichlich verwirrt werden, denn die Angebote, die man dort findet, sind sowohl in Hinsicht der Leistungsbeschreibung als auch in Bezug auf die Preise extrem unterschiedlich. Da ist es nicht ganz einfach, die Entscheidung zu treffen, von welcher Agentur man […]

default

Die lustigsten Youtube-Weihnachtsvideos zum Xmas-Fest

Ok, die Sache hat definitiv nichts mit Suchmaschinenoptimierung zu tun, aber eine Kleinigkeit wollte ich um Weihnachten dann doch noch auf meiner Webseite anbieten: Für alle Besucher von NT-SEO.de habe ich hier zu den Weihnachtstagen die lustigsten Videos aus Youtube gesammelt, die mit Weihnachten und Winter zu tun haben. Ich wünsche gute Unterhaltung, allen ein […]

  • Google
  • Infografiken
  • Lexikon
  • SEO-News
  • SEO-Tipps
  • SEO-Tools
  • Statistik
  • Über uns
  • Werbung Print & Web
  • WordPress

Kategorien

  • Google
  • Infografiken
  • Lexikon
  • SEO-News
  • SEO-Tipps
  • SEO-Tools
  • Statistik
  • Über uns
  • Werbung Print & Web
  • WordPress

Neuste Beiträge

  • shop-tasteConversion-Optimierung und SEO gehen Hand in Hand
    21. Januar 2020
  • Ranking-Heatmap von Heise.de (Quelle: ahrefs).Google Update Ende November 2019 – erste sichtbare Wirkung
    20. Dezember 2019
  • SEO – was für erfolgreiche Suchmaschinenoptimierung nötig ist, erfahren Sie in diesem Beitrag.Suchmaschinenoptimierung: SEO für Webseiten richtig nutzen!
    4. Dezember 2019
  • Das Google Adwords Express Konto auf die normale Google Adwords Optik umstellen – geht derzeit nur über den Support von Google.Google Adwords Express Konto auf normales Google Adwords umstellen
    26. Juli 2017
  • Amazon SEO vs. Google SEO – wo liegen die Unterschiede in der Technik?Amazon SEO – bessere Rankings auf der wichtigsten Shopping-Plattform
    11. Juli 2017
  • Rechnung .DE Deutsche DomaincomAchtung: unbegründete Rechnungen von deutschedomain.com per E-Mail
    28. Juni 2016
  • Branchenbücher, die mit List Local zusammenarbeitenBranchenbucheintrag bei List Local: Welche Wirkung hat er für SEO?
    23. November 2015
  • .immo Domain registrierenDomain .immo registrieren und Verfügbarkeit prüfen- copy
    29. September 2015
  • .bayern Domain registrierenDomain .bayern registrieren und Verfügbarkeit prüfen
    29. September 2015
  • .berlin Domain registrierenDomain. berlin registrieren und Verfügbarkeit prüfen
    29. September 2015
  • SEO Text BildGuter SEO-Text: Ist die Anzahl der Worte und die Keyworddichte noch wichtig?
    28. September 2015
  • Was macht eine gute Infografik aus?Die Vor- und Nachteile von Infografiken
    23. September 2015

Haben Sie Fragen?

Haben Sie noch Fragen? Wir beantworten gerne Ihre Fragen und beraten Sie. Zögern Sie nicht und nehmen Sie Kontakt auf.

zum Kontakt

Im Blog suchen

Back To Top
Net Tec Internet Agentur
Copyright © Net-Tec Internet Solutions 2020. Alle Rechte vorbehalten.
Net-Tec Internet Agentur
  • Home
  • SEO Angebot
  • Leistungen
    ▼
    • Suchmaschinenoptimierung
    • Seo-Beratung
    • Google Ads Kampagnen
    • Link Profil Analyse
    • Corporate Blogs
    • Infocharts
    • Gestaltung
  • Über uns
  • Blog
    ▼
    • SEO-Tipps
    • Google
    • WordPress
    • SEO-News
    • Statistik
    • Infografiken
    • Lexikon
  • Impressum
    ▼
    • Datenschutz
    • Kontakt
Telefon: 06456 - 9299090
(Mo - Fr: 08:00-18:00 Uhr)