Generador Robots.txt

Permiso por defecto: Permitidos
No Permitidos Rapidez de rastreo: Mapa Web (dejarlo en blanco si ninguno):

Robots

Google googlebot Por defecto
Permitido
No Permitido
MSN msnbot Por defecto
Permitido
No Permitido
Yahoo slurp Por defecto
Permitido
No Permitido
Ask/Teoma teoma Por defecto
Permitido
No Permitido
Gigablast gigabot Por defecto
Permitido
No Permitido
Scrub The Web scrubby Por defecto
Permitido
No Permitido
DMOZ Checker robozilla Por defecto
Permitido
No Permitido
Nutch nutch Por defecto
Permitido
No Permitido
Alexa/Wayback ia_archiver Por defecto
Permitido
No Permitido
Baidu baiduspider Por defecto
Permitido
No Permitido

Robots especiales

Google Image googlebot-image Por defecto
Permitido
No Permitido
Yahoo MM yahoo-mmcrawler Por defecto
Permitido
No Permitido
MSN PicSearch psbot Por defecto
Permitido
No Permitido
SingingFish asterias Por defecto
Permitido
No Permitido
Yahoo Blogs yahoo-blogs/v3.9 Por defecto
Permitido
No Permitido

Directorios restringidos Relativo a la raíz. Tiene que tener "/" al final:

Aprende SEO gratis.