robots.txt и карта на сайта

Картата на сайта се намира на адрес /sitemap.xml и се изгражда сама при всяка заявка — файл на диска няма и не е нужно да се създава. В нея попадат само страници с ниво на достъп «За всички»; езиковите версии се изброяват в рамките на един запис, както изисква Google. Раздел, скрит на някакъв език («Раздели и информери по езици» в раздела «Езици на сайта»), не попада в картата за този език.

robots.txt се отваря на адрес /robots.txt: посетителят и търсещият робот ще видят текста, а вие — редактор. Същият текст се редактира и в прозореца на раздела, с бутона «Настройки на модула», поле «Съдържание на robots.txt». Празното поле тук е смислено: означава «събирай автоматично», и системата сама ще напише разумен файл с връзка към картата на сайта.

Разделът robots.txt го има във всеки сайт, но не се показва в менюто — това е нормално.

Ако не се получи

• Промените в robots.txt не се виждат. Ако на сървъра в корена на сайта лежи истински файл robots.txt, уеб сървърът връща него и заявката не стига до системата. Файлът трябва да се изтрие.
• Страницата я няма в картата на сайта. Проверете нивото на достъп: всичко, освен «За всички», не попада в картата. Не попадат и адреси с разширение, и информери.