Viva, pessoal é a primeira vez que faço um robot e um sitemap, apos algumas pesquisas e alguns geradores finalmente terminei, alguem pode dar uma vista de olhos para ver se estão correctos?

Robots.txt

Sitemap: http://www.xpto.com/sitemap.xml.

all robots:

User-agent: *
Disallow: /bd/
Disallow: /EDITS/
Disallow: /images/

Já agora em relação ao sitemap qual a diferenca destes varios tipos de ficheiros e o que aconselham?

sitemap.xml

sitemap.xml.gz

sitemap.html

urllist.txt

Obrigado