Como usar os robots.txt

Não encontrou o que procurava?