robots.txt e mapa do site

O mapa do site está no endereço /sitemap.xml e é gerado automaticamente a cada requisição — não há arquivo no disco e não é preciso criá-lo. Apenas páginas com nível de acesso «Todos» entram nele; as versões em outros idiomas são listadas dentro de um mesmo registro, como o Google exige.

O robots.txt é aberto no endereço /robots.txt: o visitante e o robô de busca veem o texto, e você vê o editor. Um campo vazio aqui faz sentido: significa «gerar automaticamente», e o motor escreverá um arquivo razoável com link para o mapa do site.

A seção robots.txt existe em cada site, mas não é exibida no menu — isso é normal.

Se não funcionou

• As alterações no robots.txt não são visíveis. Se no servidor, na raiz do site, houver um arquivo real robots.txt, o servidor web o entrega e a requisição não chega ao motor. O arquivo deve ser removido.
• A página não está no mapa do site. Verifique o nível de acesso: tudo exceto «Todos» não entra no mapa. Também não entram endereços com extensão e informadores.