robots.txt

[calcio 2]

Fala galera alguém sabe explicar como esse robots.txt do Google funciona e pra q serve?

[michelsp 0]

http://www.robotstxt.org/wc/norobots.html

[calcio 2]

Gostaria só de um exemplo pra por exemplo tirar uma Pasta do Robô ou um determinado arquivo.

[michelsp 0]

User-agent: *Disallow: admin.phpDisallow: /admin/

[calcio 2]

onde:User-agent: *Disallow: admin.php #seria os arquivos que você quer q o Robo ñ acheDisallow: /admin/ #Seria o diretório que você quer q o robô ñ ache.Certo?

[michelsp 0]

na mosca!!! ^_^