robots.txt və sayt xəritəsi

Sayt xəritəsi /sitemap.xml ünvanında yerləşir və hər sorğuda özü yığılır — diskdə fayl yoxdur və onu yaratmaq lazım deyil. Ora yalnız «Hamıya» giriş səviyyəsi olan səhifələr düşür; dil versiyaları Google-un tələb etdiyi kimi bir qeyd daxilində sadalanır.

robots.txt /robots.txt ünvanında açılır: ziyarətçi və axtarış robotu mətni görəcək, siz isə redaktoru. Burada boş sahə mənalıdır: «avtomatik yığılsın» deməkdir və mühərrik özü sayt xəritəsinə keçidlə ağıllı fayl yazacaq.

robots.txt bölməsi hər saytda var, lakin menyuda göstərilmir — bu normaldır.

Əgər alınmadısa

• robots.txt-də dəyişikliklər görünmür. Əgər serverdə saytın kökündə əsl robots.txt faylı varsa, veb-server onu verir və sorğu mühərrikə çatmır. Faylı silmək lazımdır.
• Səhifə sayt xəritəsində yoxdur. Giriş səviyyəsini yoxlayın: «Hamıya»dan başqa hər şey xəritəyə düşmür. Həmçinin uzantılı ünvanlar və informerlər də düşmür.