Bagaimana cara optimisasi SEO untuk pemula di konteks 2026? Pertanyaan ini masih relevan, tetapi jawabannya sudah jauh lebih teknis dibanding satu dekade lalu. SEO modern bukan lagi soal trik, melainkan memastikan situs web dapat dirayapi (crawlable), dipahami (understandable), dan diindeks (indexable) oleh mesin pencari.
Tutorial seri SEO ini tetap menggunakan pendekatan white-hat, dengan mindset dasar:
Situs web harus berfungsi dengan baik, mudah diakses, dan memberikan informasi bernilai bagi pengguna maupun mesin pencari.
Pada bagian pertama ini, fokus kita adalah memastikan situs web dapat ditelusuri Google dan mesin pencari lain seperti Bing. Pokok bahasan tetap sama dengan versi awal, tetapi penjelasan diperbarui agar sesuai praktik SEO 2026.
Daftar isi
Apa itu Elemen Meta Robot (meta name=”robots”)?
Meta tag adalah metadata yang ditempatkan di bagian <head> dokumen HTML. Metadata ini tidak terlihat oleh pengunjung, tetapi penting bagi mesin pencari untuk memahami bagaimana sebuah halaman harus diperlakukan.
Contoh struktur HTML sederhana:
<!DOCTYPE html>
<html lang="id">
<head>
<title>Tutorial Optimisasi SEO</title>
<meta name="robots" content="index, follow">
</head>
<body>
</body>
</html>
Fungsi meta robots di 2026
Secara default, Google mengasumsikan index, follow, sehingga meta robots tidak wajib ditulis jika tidak ada pembatasan. Namun, meta ini menjadi krusial saat Anda ingin mengontrol perilaku indexing, terutama untuk halaman yang memang tidak layak masuk hasil pencarian.
Nilai meta robots yang umum dipakai:
- noindex: halaman tidak akan dimasukkan ke indeks Google.
- nofollow: Google tidak mengikuti tautan di halaman tersebut (jarang direkomendasikan secara global).
- noarchive: mencegah versi cache ditampilkan.
- nosnippet: mencegah cuplikan tampil di hasil pencarian.
Catatan: noodp sudah tidak relevan karena direktori DMOZ/ODP sudah lama ditutup dan tidak lagi dipakai sebagai sumber deskripsi.
Hal yang paling sering bikin situs tidak terindeks
- Theme atau plugin menambahkan
noindexke seluruh situs tanpa disadari. - Situs staging ikut terindeks karena lupa diset
noindex. - Halaman penting justru punya canonical ke URL lain.
- Halaman mengembalikan status selain 200 (misalnya 404, 410, 500) atau redirect berlapis.
Prinsip aman: pastikan halaman yang ingin Anda ranking tidak memakai noindex, dapat diakses publik, dan mengembalikan status 200.
Apa itu Sitemap XML?
Sitemap adalah file XML yang memberi sinyal terstruktur kepada mesin pencari tentang URL mana yang ingin Anda indeks. Di 2026, sitemap lebih berguna sebagai cara memastikan mesin pencari mengetahui URL penting, perubahan URL, dan pembaruan konten.
Contoh sitemap XML yang valid:
<?xml version="1.0" encoding="UTF-8"?>
<urlset xmlns="http://www.sitemaps.org/schemas/sitemap/0.9">
<url>
<loc>https://www.kubisnis.com/portal/</loc>
<lastmod>2026-01-15</lastmod>
</url>
<url>
<loc>https://www.kubisnis.com/portal/kategori</loc>
<lastmod>2026-01-10</lastmod>
</url>
</urlset>
Praktik terbaik sitemap di 2026
- Pastikan URL di sitemap mengembalikan status 200, bukan redirect berlapis.
- Jangan masukkan URL yang Anda
noindexke dalam sitemap (ini bikin sinyal bertabrakan). - Gunakan
lastmodyang akurat, jangan asal update setiap hari tanpa perubahan. - Untuk situs besar, gunakan sitemap index (memecah sitemap per tipe konten).
Sitemap tidak menjamin indexing, tetapi membantu Google memahami struktur dan prioritas kerja crawling. Jika halaman penting tidak pernah ditemukan, sitemap sering jadi pembeda.
Apa itu robots.txt?
robots.txt adalah file teks di root domain yang memberi instruksi crawling, bukan indexing. Artinya, robots.txt menentukan apakah bot boleh mengakses sebuah path, tetapi tidak selalu mencegah URL muncul di hasil pencarian.
Contoh robots.txt yang umum:
User-agent: *
Disallow:
Sitemap: https://www.kubisnis.com/post-sitemap.xml
Sitemap: https://www.kubisnis.com/page-sitemap.xml
Sitemap: https://www.kubisnis.com/portal/sitemap.xml
Kapan pakai robots.txt, kapan pakai noindex?
| Tujuan | Pendekatan yang tepat |
|---|---|
| Mencegah halaman muncul di hasil pencarian | meta robots noindex (atau header X-Robots-Tag) |
| Menghemat crawl budget pada area tidak penting | robots.txt |
| Melindungi area sensitif | Autentikasi, izin akses server, atau proteksi aplikasi |
Kesalahan umum: menaruh path sensitif di robots.txt berharap aman. Itu tidak aman. robots.txt justru mengumumkan lokasi path yang tidak ingin dirayapi, dan crawler nakal tidak wajib patuh.
Apa itu Google Search Console?
Google Search Console (GSC) adalah alat wajib untuk memastikan semua elemen di atas benar-benar bekerja. Di 2026, GSC menjadi tempat utama untuk memeriksa status indexing, error crawling, dan validasi sitemap.
Langkah minimal yang sebaiknya Anda lakukan
- Verifikasi properti domain atau URL prefix.
- Submit sitemap Anda dan cek apakah ada error parsing atau URL ditolak.
- Pakai URL Inspection Tool untuk cek halaman penting: apakah bisa di-crawl, apakah canonical benar, dan status indexing-nya.
- Pantau laporan Pages untuk melihat alasan halaman tidak diindeks (misalnya “Crawled – currently not indexed”).
Kalau ada mismatch antara canonical, noindex, atau blokir robots.txt, GSC biasanya menampilkan alasan yang cukup jelas. Intinya, GSC adalah alat diagnosis, bukan sekadar formalitas.
Checklist cepat dan kesalahan umum
Checklist cepat
- Halaman penting mengembalikan status 200.
- Tidak ada meta robots noindex pada halaman penting.
- Canonical mengarah ke URL yang benar (bukan ke homepage atau versi lain tanpa alasan).
- Sitemap berisi URL yang memang ingin diindeks.
- robots.txt tidak memblokir folder yang seharusnya bisa dirayapi.
- GSC bisa mengakses halaman (tidak diblokir firewall atau WAF yang terlalu agresif).
Kesalahan umum
- Staging site terbuka tanpa noindex, lalu terindeks.
- Plugin SEO mengubah setting indexing saat migrasi atau ganti theme.
- Halaman di sitemap tetapi sebenarnya noindex atau redirect.
- robots.txt memblokir CSS/JS penting sehingga render Google tidak optimal.
Kesimpulan dan saran teknis
Kesalahan SEO paling fatal bukan pada konten, melainkan situs tidak bisa diindeks dengan benar. Jika fondasi crawl dan index bermasalah, optimasi konten dan backlink pun tidak akan maksimal.
- Jangan sembarang memakai noindex.
- Jangan salah kaprah memakai robots.txt sebagai alat keamanan.
- Gunakan sitemap sebagai sinyal struktur dan inventaris URL yang ingin diindeks.
- Pantau dan diagnosis lewat Google Search Console.
Kutip artikel ini:
Kontributor KuBisnis, 2016, https://www.kubisnis.com/memastikan-situs-web-dapat-diakses-google-seo-1/ (diakses pada 19 Jul 2026).
Artikel ini bukan yang Anda butuhkan?
Anda bisa mengirimkan saran pada KuBisnis di akun fb/twitter/google kami di @KuBisnis.
Topik dengan voting komentar terbanyak akan mendapatkan prioritas dibuatkan artikel.
