Setelah redesign: rapikan URL, sitemap, robots.txt, dan canonical
Cara membedakan pengalihan, penghapusan URL, noindex, robots.txt, dan sitemap ketika struktur website berubah.

Mulai dari daftar alamat, bukan dari plugin SEO
Ambil daftar halaman dari sitemap lama, arsip konten, atau laporan halaman pada Search Console. Kelompokkan menjadi tetap, pindah, digabung, dan dihapus. Daftar itu membantu menghindari dua kesalahan: artikel bagus hilang tanpa petunjuk dan halaman yang sengaja dihentikan tetap muncul dari sisa berkas.
Pemetaan juga harus mencakup varian alamat yang pernah dipakai, misalnya halaman .php, folder dengan garis miring, serta URL kategori. Jangan menganggap pola yang terlihat mirip pasti merujuk ke materi yang sama. Baca isi atau catatan publikasinya sebelum menentukan tujuan.
Pilih respons yang sesuai dengan keadaan halaman
| Keadaan | Tindakan yang masuk akal | Yang perlu dihindari |
|---|---|---|
| Isi tetap tersedia | 200 pada alamat utama. | Membuat salinan identik pada banyak URL tanpa petunjuk. |
| Isi pindah permanen | 301 atau 308 menuju pengganti yang relevan. | Rantai pengalihan panjang atau tujuan yang tidak ada. |
| Isi sengaja dihentikan | 404 atau 410 dengan halaman penjelasan. | Semua halaman hilang diarahkan ke beranda. |
| Halaman utilitas tidak perlu diindeks | noindex, dengan akses perayap yang memungkinkan tag dibaca. | Memblokir perayap lalu berharap ia membaca noindex. |
Google menjelaskan pemetaan saat migrasi dan penggunaan status untuk konten yang tidak dipindahkan [1]. Pengalihan bukan cara memindahkan nilai dari halaman yang tidak berkaitan. Bagi pembaca, tujuan yang relevan juga jauh lebih berguna daripada pendaratan mendadak di beranda.
Canonical adalah petunjuk, bukan pintu akses
Setiap artikel utama sebaiknya menunjuk pada URL yang memang ingin dipakai, dengan protokol, domain, dan garis miring yang konsisten. Hindari canonical artikel yang semuanya menunjuk ke beranda. Jika halaman error memiliki canonical, jangan biarkan ia terlihat sebagai salinan artikel atau halaman utama.
Gunakan URL absolut yang tetap pada metadata dan sitemap. Untuk tautan navigasi di dalam situs, URL relatif dari akar juga dapat dipakai. Setelah build, cocokkan keduanya agar domain uji tidak tertinggal pada halaman produksi.
Canonical tidak menolak pengunjung, tidak menutup berkas rahasia, dan bukan jaminan bahwa Google akan memilih URL tersebut. Perlindungan akses harus dilakukan oleh autentikasi serta konfigurasi server.
Pisahkan robots.txt dan noindex
Robots.txt mengatur akses perayapan bagi bot yang mematuhinya. File ini tersedia untuk umum dan tidak dirancang sebagai pengaman direktori [2]. Jangan menaruh rahasia pada nama URL lalu berharap Disallow membuatnya tidak bisa ditemukan.
Noindex meminta mesin pencari tidak memasukkan halaman ke indeks. Supaya instruksi itu dapat diketahui, halaman perlu bisa diambil oleh perayap; Google menjelaskan batas ini secara khusus [3]. Untuk halaman login atau data privat, autentikasi tetap wajib. Instruksi indeks hanya lapisan tambahan, bukan penggantinya.
User-agent: *
Allow: /
Disallow: /data/
Disallow: /storage/
Sitemap: https://example.com/sitemap.xmlContoh ini bukan konfigurasi universal. Pada situs nyata, direktori data juga harus ditolak akses webnya. Jangan menyalin baris Disallow: / ke produksi bila seluruh artikel memang ditujukan untuk dibaca publik.
Sitemap yang kecil tetapi benar lebih berguna
Masukkan URL utama yang berstatus 200, relevan untuk pencarian, dan tidak diberi noindex. Keluarkan hasil pencarian internal, login, endpoint API, halaman error, dan URL yang sudah dialihkan. Tanggal perubahan seharusnya mencerminkan pembaruan isi yang nyata, bukan sekadar berubah setiap server mengirim file.
Sitemap membantu penemuan, bukan menjamin pengindeksan. Setelah pemasangan, buka file XML secara langsung, periksa beberapa URL di dalamnya, dan kirim sitemap yang tepat di Search Console. Jangan hanya mengecek bahwa file tersebut dapat diunduh; isi yang salah tetap bisa berformat XML sah.
Periksa perubahan dari luar sesi administrator
Uji satu URL pada setiap kelompok: tetap, pindah, dihapus, dan tidak pernah ada. Lihat status HTTP dan tujuan pengalihannya. Coba juga domain www serta non-www dan pastikan tidak terjadi lingkaran pengalihan. Untuk layanan perangkat, jangan memaksakan aturan artikel jika kontrak koneksinya berbeda.
Di Search Console, gunakan inspeksi URL untuk melihat akses halaman utama dan beberapa artikel. Hasil indeks bisa memerlukan waktu untuk berubah. Simpan daftar pemeriksaan dan jangan mengirim permintaan berulang sebagai pengganti perbaikan isi atau akses. Panduan pengujian sebelum publikasi membantu memeriksa bagian yang tidak terlihat dari sitemap.
Rujukan untuk memeriksa konsepnya
Dokumentasi resmi dan standar di bawah membantu pembaca meninjau istilah serta langkah teknis. Tautan ini bukan klaim bahwa setiap contoh dalam artikel telah diuji di semua perangkat atau hosting.
- Google: Canonical URLs
Pemilihan URL utama untuk halaman duplikat atau serupa.
- Google: Sitemaps
Struktur sitemap yang sejalan dengan URL publik.
Laporkan bagian artikel yang perlu diperbaiki agar redaksi dapat memeriksa informasi dan sumbernya.
Kirim koreksi ke redaksi