Robots.txt-Generator

Standard - Alle Roboter sind:

Crawl-Verzögerung:

Sitemap: (leer lassen, wenn nicht vorhanden)

Suchroboter:	Google
	Google Image
	Google Mobile
	MSN Search
	Yahoo
	Yahoo MM
	Yahoo Blogs
	Ask/Teoma
	GigaBlast
	DMOZ Checker
	Nutch
	Alexa/Wayback
	Baidu
	Naver
	MSN PicSearch

Eingeschränkte Verzeichnisse:	Der Pfad ist relativ zum Stammverzeichnis und muss mit einem Schrägstrich enden "/"

Erstellen Sie nun eine 'robots.txt'-Datei in Ihrem Stammverzeichnis. Kopieren Sie den obigen Text und fügen Sie ihn in die Textdatei ein.

Über Robots.txt-Generator

LATEST BLOGS