Este é o principal modelo de arquivo para quem quer indexar todo seu site. Para isso basta copiar e colocar na raiz do site. Ao inserir o seguinte código, o site estará liberado para o Robô fazer a indexação de todas as páginas, arquivos e diretórios do site.
User-agent:*
Disallow:
0 Comentários
Achou este artigo interessante? Então comente, compartilhe, curta, envie ou recomende aos amigos nossos artigos.