Robots.txt-Generator

Default - All Robots are

Crawl-Delay

Seitenverzeichnis

Lassen Sie das Feld leer, wenn Sie es nicht haben.

Suchroboter:

Google
Google Image
Google Mobile
MSN Search
Yahoo
Yahoo MM
Yahoo Blogs
Ask/Teoma
GigaBlast
DMOZ Checker
Nutch
Alexa/Wayback
Baidu
Naver
MSN PicSearch

Ordner verbieten

Der Pfad ist relativ zur Wurzel und muss einen nachgestellten Schrägstrich "/" enthalten.

Wir verwenden Cookies, um sicherzustellen, dass wir Ihnen das beste Erlebnis auf unserer Website bieten. Wenn Sie diese Seite weiterhin nutzen, gehen wir davon aus, dass Sie damit zufrieden sind.

Robots.txt-Generator

Our Services

Tools

Hosting Reviews

Help

Company

Our Policy

Robots.txt-Generator

Verwandte Tools