Robots.txt-Generator

Über Robots.txt-Generator

Erstellen Sie sofort eine gültige robots.txt-Datei für Ihre Website. Steuern Sie den Zugriff von Suchmaschinen-Crawlern auf Ihre Seiten mit unserem kostenlosen Generator.


Standard - Alle Roboter sind:  
    
Crawl-Verzögerung:
    
Seitenverzeichnis: (leer lassen, wenn Sie nicht haben) 
     
Roboter suchen: Google
  Google Image
  Google Mobile
  MSN Search
  Yahoo
  Yahoo MM
  Yahoo Blogs
  Ask/Teoma
  GigaBlast
  DMOZ Checker
  Nutch
  Alexa/Wayback
  Baidu
  Naver
  MSN PicSearch
   
Eingeschränkte Verzeichnisse: Der Pfad ist relativ zu root und muss einen abschließenden Schrägstrich enthalten "/"
 
 
 
 
 
 
   



Erstellen Sie jetzt die Datei "robots.txt" in Ihrem Stammverzeichnis. Kopieren Sie den obigen Text und fügen Sie ihn in die Textdatei ein.


Frequently asked questions

Is the robots.txt Generator free?

This tool requires an active one-time membership to use - pay once and unlock this tool plus every other gated tool on the site, no subscription, no ads.

Where do I upload the robots.txt file?

It must be placed at the root of your domain (e.g. yoursite.com/robots.txt) - it won't be recognized by search engines if placed in a subfolder.

Can robots.txt stop a page from appearing in Google entirely?

Not reliably on its own - it tells crawlers not to *crawl* a page, but a disallowed page can still be indexed if other sites link to it. Use a noindex meta tag on the page itself if you need it fully excluded from search results.

Tools durchsuchen