robots.txt és oldaltérkép

A webhelytérkép a /sitemap.xml címen található, és minden kérésnél automatikusan összeáll — nincs fájl a lemezen, és nem kell létrehozni. Csak a „Mindenki” hozzáférési szintű oldalak kerülnek bele; a nyelvi verziók egy bejegyzésen belül vannak felsorolva, ahogy a Google megköveteli. Az adott nyelven elrejtett szakasz („Szakaszok és informerek nyelvek szerint” a „Webhely nyelvei” lapon) nem kerül be a térképbe arra a nyelvre.

A robots.txt a /robots.txt címen nyílik meg: a látogató és a keresőrobot a szöveget látja, Ön pedig a szerkesztőt. Ugyanez a szöveg szerkeszthető a szakasz ablakában is, a „Modul beállításai” gombbal, a „robots.txt tartalma” mezőben. Az üres mező itt értelmes: azt jelenti, hogy „állítsd össze automatikusan”, és a motor maga ír egy értelmes fájlt a webhelytérképre mutató hivatkozással.

A robots.txt szakasz minden webhelyen létezik, de a menüben nem jelenik meg — ez normális.

Ha nem sikerült

• A robots.txt módosításai nem láthatók. Ha a szerveren a webhely gyökérkönyvtárában valódi robots.txt fájl található, a webszerver azt szolgálja ki, és a kérés nem ér el a motorig. A fájlt törölni kell.
• Az oldal nincs a webhelytérképen. Ellenőrizze a hozzáférési szintet: minden, ami nem „Mindenki”, nem kerül be a térképbe. A kiterjesztéssel rendelkező címek és az informerek szintén nem kerülnek bele.