robots.txt dan peta laman

Peta laman terletak di alamat /sitemap.xml dan dijana sendiri pada setiap permintaan — tiada fail pada cakera dan tidak perlu menciptanya. Hanya halaman dengan tahap akses «Semua» dimasukkan; versi bahasa disenaraikan dalam satu entri, seperti yang dikehendaki oleh Google.

robots.txt dibuka di alamat /robots.txt: pelawat dan robot carian akan melihat teks, manakala anda — editor. Medan kosong di sini bermakna: «kumpul secara automatik», dan enjin akan menulis fail yang munasabah dengan pautan ke peta laman.

Bahagian robots.txt ada pada setiap laman, tetapi ia tidak dipaparkan dalam menu — ini normal.

Jika tidak berjaya

• Perubahan dalam robots.txt tidak kelihatan. Jika pada pelayan di akar laman terdapat fail sebenar robots.txt, pelayan web akan menyampaikannya dan permintaan tidak sampai ke enjin. Fail itu perlu dipadamkan.
• Halaman tiada dalam peta laman. Semak tahap akses: semua kecuali «Semua» tidak dimasukkan ke dalam peta. Alamat dengan sambungan dan informer juga tidak dimasukkan.