Cara Membuat Robot Txt Pada Wordpress

Cara Membuat Robot Txt Pada Wordpress

Selain dengan menggunakan webmaster, banyak metode lain yang bisa digunakan untuk mempercepat proses indeks konten dalam sebuah blog. Namun banyak blogger yang belum tahu sebenarnya mengenai cara yang akan saya terangkan di bawah ini.

Banyak pertanyaan kemarin yang diajukan kepada saya dari para blogger indonesia khususnya “mas, bagaimana ini sudah 2 minggu kok artikel saya belum diindeks sama mesin pencari ?”. Ya saya jawab “mungkin masih dalam proses mas, biasanya dapat 10 artikel baru di indeks”?. Setelah saya jawab seperti itu banyak dari mereka juga bertanya “Apakah bisa dipercepat mas?” dari pertanyaan inilah saya membuat artikel custom robot txt.

Namun belum banyak yang mengerti mengenai robot txt ini dan menyia-nyiakan fitur ini padahal fitur ini dapat membantu proses indeks mesin pencari agar tidak meng crawl semua halaman yang anda anggap tidak perlu dirayapi.

Tapi tenang saja, disini saya akan menerangkan cara setting robot txt yang selama ini belum anda ketahui fungsi dan manfaatnya. Disini saya akan menerangkan proses pembuatan dan cara setting nya pada wordpress.

Cara Membuat Robot Txt  : Melalui Google Webmaster

  1. Pada pencarian ketik kata kunci “Google Search Console” tanpa tanda kutip, nanti pada hasil pencarian teratas klik lalu masuk ke search console dengan akun gmail anda yang sudah terhubung dengan blogspot.
  2. Nanti ada properti, disini properti adalah blog anda. Klik blog anda yang ingin diberi robot txt.
  3. Jika sudah, masuk ke menu Crawl > Robot Txr Tester. Jika anda tidak paham, dalam bahasa indonesia berarti Perayapan > Penguji Robot Txt.
  4. Lalu ada form kosong, nanti masukkan custom robot txt yang berwarna biru pada cara pertama. Dan ganti url nya dengan url blog sobat.
  5. Kemudian klik submit / kirim.
  6. Dan sekian, begitulah cara setting robot txt di blogspot melalui google webmaster.

Pada WordPress Dot Com Dan Dot Org

Cara Setting Robot Txt Di WordPress Menggunakan Plugin Yoast SEO

  1. Disini kita membutuhkan plugin yang bernama Yoast SEO, tidak perlu yang versi pro, yang free saja sudah cukup.
  2. Masuk ke dashboard blog wordpress anda.
  3. Pada menu plugin tambahkan plugin baru dengan cara klik Plugin > Tambah Baru.
  4. Cari plugin yang bernama yoast seo pada kolom pencarian, nanti jika sudah ketemu langsung instal dan aktifkan.
  5. Setelah berhasil menginstal dan mengaktifkan yoast seo, maka masuk ke dashboardnya.
  6. Nanti akan terdapat tombol huruf pada header wordpress sorot dan klik dashboard seperti pada gambarcara setting robot txt di wordpress
  7. Setelah masuk ke dashboardnya nanti ada berbagai macam menu, pilih Featuresyoast dashboard features
  8. Setelah features dipilih, gulir kebawah nanti anda akan menjumpai beberapa fitur yang bertanda enable dan disable.
  9. Cari “Advanced settings pages” dan aktifkan pilihan enable. Kemudian simpan perubahan. Ini dilakukan agar menu tambahan pada plugin yoast seo aktif semua.
  10. Jika sudah, langsung masuk seperti pada gambar di bawahyoast dashboard tool
  11. Kemudian pilih file editor.
  12. Nanti akan keluar pilihan custom robot txt dan .htaccess. Pilih yang robot txt dan klik “Create robot.txt file“.
  13. Kemudian nanti akan ada halaman kosong yang harus diisi, masukkan kode berikut iniUser-agent: *
    Disallow: /cgi-bin
    Disallow: /wp-admin
    Disallow: /wp-includes
    Disallow: /wp-content
    User-agent: Mediapartners-Google
    Allow: /
    User-agent: Adsbot-Google
    Allow: /
    User-agent: Googlebot-Image
    Allow: /
    User-agent: Googlebot-Mobile
    Allow: /
    Sitemap: http/https:urlblogkamu.com/sitemap_index.xml
  14. Jika sudah selesai maka klik “save changes robot.txt”.
  15. Sampai tahap ini anda telah berhasil membuat tag tajuk robot khusus beserta cara setting robot txt di wordpress.

Cara Membuat Robot Txt Selanjutnya : Melalui Webmaster Tool / Google Search Console

  1. Caranya hampir mirip seperti pada cara setting robot txt di blogspot, namun disini yang membedakan kode yang dimasukkan yakni wajib kode yang telah dibuat melalui yoast seo tadi.
  2. Soalnya antara blogspot dan wordpress memiliki folder yang berbeda. Pada blogspot tidak ada folder wp-admin sedangkan pada wordpress ada.
  3. Begitulah cara setting robot txt di wordpress secara lengkap dan mendetail.

Keterangan

Jika anda hendak membuat robot txt yang tidak diperbolehkan mengcrawl halaman tertentu, anda cukup menambahkan kode Disallow :/nama-halaman-kamu.

Sekian tutorial membuat robot txt yang benar versi dewailmu pada blogspot dan wordpress. Semoga konten / artikel blog anda cepat diindeks oleh robot google. Dan semoga bermanfaat untuk teman-teman blogger semuanya.

Posted in

Comments are closed, but trackbacks and pingbacks are open.