robots.txt für die Blogsoftware von Serendipity

Ich habe gerade festgestellt, dass mein Blog keine "robots.txt" besitzt. Da die Gefahr des doppelten Kontents besteht, was Google überhaupt nicht mag, habe ich mir nach der nachfolgenden Anleitung jetzt eine robots.txt gebastelt:

www.webmaster-support.net/robots.txt-fuer-Serendipity.html

Meine "robots.txt" sieht jetzt so aus:

Sitemap: http://www.moneyletter.de/sitemap.xml.gz

User-agent: *
Disallow: /feeds/

Disallow: /bundled-libs/
Disallow: /deployment/
Disallow: /docs/
Disallow: /htmlarea/
Disallow: /include/
Disallow: /lang/
Disallow: /plugins/
Disallow: /sql/
Disallow: /templates_c/

Disallow: /impressum.html

Die Datei kann man auf der folgenden Seite dann auf Richtigkeit überprüfen lassen:

http://tool.motoricerca.info/robots-checker.phtml

Posted by Curt Leuch

Defined tags for this entry: robots.txt, robots.txt Blogsoftware, robots.txt Serendipity