Kenapa Edit Robots.txt Itu Perlu?
WordPress sebenarnya bisa otomatis membuat file robots.txt. Tapi sayangnya, versi defaultnya nggak selalu optimal. Kadang malah terlalu umum, atau bahkan salah arah.
Nah, dengan plugin Rank Math, kamu bisa:
- Edit robots.txt langsung dari dashboard WordPress.
- Atur folder atau halaman mana yang perlu diblokir.
- Tambahkan sitemap kamu supaya lebih cepat dirayapi Google.
Ini cocok banget buat kamu yang baru mulai belajar SEO teknis tapi tetap ingin websitenya tampil optimal di Google. Langkah-langkahnya simpel, dan pastinya aman kalau kamu ikuti dengan teliti. Yuk langsung kita mulai tutorialnya!
Cara Edit Robots.txt Menggunakan Rank Math
Langkah 1: Pastikan Plugin Rank Math Sudah Terpasang
Kalau kamu belum punya Rank Math:
- Masuk ke Dashboard WordPress > Plugin > Add New
- Cari “Rank Math SEO”.
- Klik Install Now, lalu Activate.
Kalau sudah terpasang, lanjut ke langkah berikutnya.
Langkah 2: Buka Pengaturan Robots.txt
- Di dashboard WordPress, klik Rank Math > General Settings.
- Lalu pilih tab Edit Robots.txt
- Kamu akan melihat tampilan editor teks sederhana di layar.
Langkah 3: Edit Isi File Robots.txt
Nah, di sini kamu bisa mulai edit isi file kamu. Contoh pengaturannya:
User-agent: *
Disallow: /wp-admin/
Disallow: /cart/
Disallow: /checkout/
Allow: /wp-admin/admin-ajax.php
Sitemap: https://namadomainkamu.com/sitemap.xml
Penjelasan singkat:
User-agent: *artinya pengaturan ini berlaku untuk semua mesin pencari.
Disallow:bagian ini untuk blokir folder atau halaman tertentu.
Allow:untuk pengecualian akses.
Sitemap:penting banget supaya Google tahu peta situs kamu.
Langkah 4: Simpan Perubahan
Setelah kamu yakin dengan isi file-nya, klik tombol Save Changes di bawah editor. Selesai deh! Sekarang robots.txt kamu sudah aktif sesuai kebutuhan SEO kamu.
Tips Tambahan Biar Nggak Salah Setting
Jangan blokir halaman penting!
Pastikan kamu nggak sengaja blokir halaman seperti homepage, blog utama, atau produk. Itu bisa bikin website kamu hilang dari hasil pencarian!
Selalu cek ulang pakai tool Google
Gunakan Google Search Console – Robots Testing Tool buat pastiin robots.txt kamu nggak bikin error.
Tambahkan sitemap
Ini sering dilupain, padahal penting banget! Sitemap bikin mesin pencari tahu semua halaman penting di websitemu.
Ingin Website Kamu Lebih SEO Friendly?
Optimasi robots.txt itu cuma satu bagian kecil dari strategi SEO yang lebih besar. Kalau kamu ingin website kamu:
- Cepat diindeks Google.
- Muncul di halaman pertama pencarian.
- Punya struktur yang kuat.
Kamu bisa banget kerja sama bareng tim Serindit Creatives! Kami bantu kamu mulai dari pembuatan website, audit SEO, sampai optimasi teknis kayak robots.txt, sitemap, dan kecepatan loading. Yuk kunjungi layanan Serindit Creatives sekarang!
Kalau kamu ingin tahu lebih dalam tentang fungsi dan cara optimasi file robots.txt secara umum, kamu bisa baca panduan lengkapnya di artikel cara optimasi robots.txt.
