Robots.txt-Generator

Default - All Robots are

Crawl-Delay

Seitenverzeichnis

Lassen Sie das Feld leer, wenn Sie es nicht haben.

Suchroboter:

Google
Google Image
Google Mobile
MSN Search
Yahoo
Yahoo MM
Yahoo Blogs
Ask/Teoma
GigaBlast
DMOZ Checker
Nutch
Alexa/Wayback
Baidu
Naver
MSN PicSearch

Ordner verbieten

Der Pfad ist relativ zur Wurzel und muss einen nachgestellten Schrägstrich "/" enthalten.

Holen Sie sich HTTP-Header

FAQ-Schemagenerator

Meta-Tags-Analysator

Was ist mein Browser?

kürzliche Posts

Wir verwenden Cookies, um sicherzustellen, dass wir Ihnen das beste Erlebnis auf unserer Website bieten. Wenn Sie diese Seite weiterhin nutzen, gehen wir davon aus, dass Sie damit zufrieden sind.