Robots.txt Generator

Ottimizzazione del motore di ricerca

Robots.txt Generator


Predefinito: tutti i robot sono:  
    
Crawl-Delay:
    
Mappa del sito: (lascia vuoto se non hai) 
     
Cerca robot: Google
  Google Image
  Google Mobile
  MSN Search
  Yahoo
  Yahoo MM
  Yahoo Blogs
  Ask/Teoma
  GigaBlast
  DMOZ Checker
  Nutch
  Alexa/Wayback
  Baidu
  Naver
  MSN PicSearch
   
Directory ristrette: Il percorso è relativo a root e deve contenere una barra finale "/"
 
 
 
 
 
 
   



Ora crea il file "robots.txt" nella tua directory principale. Copia sopra il testo e incollalo nel file di testo.


Di Robots.txt Generator

Robots.txt Generator. Search Engines are usingrobots (or so called User-Agents) to crawl your pages. The robots.txt file is a text file that defines which parts of a domain can be crawled by a robot