robots.txt un vietnes karte

Vietnes karte atrodas adresē /sitemap.xml un tiek veidota automātiski pie katra pieprasījuma — faila diskā nav un tas nav jāveido. Tajā iekļūst tikai lapas ar piekļuves līmeni “Visiem”; valodu versijas tiek uzskaitītas vienā ierakstā, kā to prasa Google.

robots.txt tiek atvērts adresē /robots.txt: apmeklētājs un meklēšanas robots redzēs tekstu, bet jūs — redaktoru. Tukšs lauks šeit ir jēgpilns: tas nozīmē “veidot automātiski”, un dzinējs pats uzrakstīs saprātīgu failu ar saiti uz vietnes karti.

Sadaļa robots.txt ir katrā vietnē, bet izvēlnē tā netiek rādīta — tas ir normāli.

Ja neizdevās

• Izmaiņas robots.txt nav redzamas. Ja serverī vietnes saknē atrodas īsts fails robots.txt, tīmekļa serveris to atgriež un pieprasījums līdz dzinējam nenonāk. Fails ir jāizdzēš.
• Lapas nav vietnes kartē. Pārbaudiet piekļuves līmeni: viss, izņemot “Visiem”, kartē neiekļūst. Tāpat neiekļūst adreses ar paplašinājumu un informeri.