robots.txt и мапа сајта

Мапа сајта налази се на адреси /sitemap.xml и склапа се сама при сваком захтеву — датотеке на диску нема и не треба је правити. У њу улазе само странице са нивоом приступа „Свима“; језичке верзије набрајају се унутар једног записа, како Google то захтева. Одељак који је скривен на неком језику („Одељци и информери по језицима“ на картици „Језици сајта“) за тај језик не улази у мапу.

robots.txt отвара се на адреси /robots.txt: посетилац и претраживачки робот видеће текст, а ви — едитор. Исти текст се уређује и у прозору одељка, дугметом „Подешавања модула“, поље „Садржај robots.txt“. Празно поље овде има смисла: значи „склапај аутоматски“, и систем ће сам написати разуман фајл са линком на мапу сајта.

Одељак robots.txt постоји на сваком сајту, али се у менију не приказује — то је нормално.

Ако није успело

• Измене у robots.txt се не виде. Ако на серверу у корену сајта лежи прави фајл robots.txt, веб-сервер даје њега и захтев не стиже до система. Фајл треба обрисати.
• Странице нема у мапи сајта. Проверите ниво приступа: све осим „Свима“ не улази у мапу. Такође не улазе адресе са наставком и информери.