Gerald Mann

robots.txt für wordpress

Nachdem ich vor ettlichen Monaten bereits die perfekt Robots.txt beschrieben habe, ist nun eine extra Robotx.txt für Wordpress dran. Diese sollte folgenden Inhalt haben: User-agent: * Disallow: /cgi-bin Disallow: /wp-admin Disallow: /wp-includes Disallow: /wp-content/plugins Disallow: /wp-content/cache Disallow: /wp-content/themes Disallow: /trackback Disallow: */trackback Disallow: /*?* Disallow: /?s* Disallow: /*.php$ Disallow: /*.js$ Disallow: /*.inc$ Disallow: /*.css$ Zusätzlich sollten im Template Header die folgende Zeile eingefügt werden: <?php if ( ... Tags: robots.txt, wordpress

So sieht eine gute Robots.txt aus!!

Irgendwie gehört eine Robots.txt zu den absoluten Basics eines Seo´s. Vermutlich genau deswegen, wird er von diesen Seo´s nicht beachtet. Dabei sind es doch oftmals nur ein paar Zeilen die kopiert werden müssen um wenigstens den einfachsten Contentdieben den Saft abzudrehen. Ich habe mir daher selbst in den letzten Jahren ... Tags: robots.txt, SEO