robots.txt für wordpress
veröffentlicht unter SEO
Nachdem ich vor ettlichen Monaten bereits die perfekt Robots.txt beschrieben habe, ist nun eine extra Robotx.txt für Wordpress dran. Diese sollte folgenden Inhalt haben:
User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */trackback
Disallow: /*?*
Disallow: /?s*
Disallow: /*.php$
Disallow: /*.js$
Disallow: /*.inc$
Disallow: /*.css$
Zusätzlich sollten im Template Header die folgende Zeile eingefügt werden:
<?php if ( ( is_home() && !is_paged() ) || is_single() || is_page() ) {
echo '<meta name="robots" content="index, follow" />';
} else {
echo '<meta name="robots" content="noindex, follow" />';
} ?>
Tags: robots.txt, wordpress
