Inscreva-se no Canal Djobix

Robots.txt disallow – bloqueando pastas

O arquivo robots.txt é utilizado para restringir ou liberar o acesso ao site. Quando queremos bloquear algum diretório podemos utilizar:

User-agent: *

Disallow: /pasta01/
Disallow: /pasta-teste/