Cara Membuat Robot.txt agar Blog Mudah di Index Google

Pada tutorial kali ini saya akan meberikan tuorial Cara Membuat Robot.txt agar Blog Mudah di Index Mesin Pencari.

Apa itu Robot.txt?

Robots.txt adalah sebuah file berformat text (.txt) yang wajib dimiliki setiap situs diinternet yang didaftarkan pada mesin pencari seperti google, yahoo, dan bing. Jadi robots.txt sangat erat hubungannya dengan SEO. Robot.txt berfungsi untuk mengontrol dan mengatur halaman atau direktori mana yang boleh ditampilkan/diindex mesin pencari.

Bagaimana Cara Membuat Robot.txt agar mudah di index mesin pencari?

Caranya cukup mudah, kamu cukup membuat file .txt di notepad dan ketikan kode berikut.

sitemap: http://ardiyansyah.com/sitemap.xml
User-agent: *
# disallow all files in these directories
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /cgi-bin/
Disallow: /wp-content/
Disallow: /archives/
Disallow: /*?*
Disallow: *?replytocom
Disallow: /author
Disallow: /comments/feed/
Disallow: */trackback/
Disallow: /wp-*
Disallow: /*?*
User-agent:Mediapartners-Google*
Allow:/
User-agent:Googlebot-Image
Allow:/wp-content/uploads/
User-agent:Adsbot-Google
Allow:/
User-agent:Googlebot-Mobile
Allow:/

Perhatikan pada bagian setemap di atas, ganti tulisan berwarna merah dengan alamat website kamu sendiri.

Jika kamu menggunakan plugin Yeast SEO, ganti link sitemap nya menjadi seperti ini.

sitemap: http://namawebsite.com/sitemap_index.xml

Jika sudah save dengan nama robot.txt lalu upload file tersebut ke direktori root website kamu atau di folder public_html melalui cpanel.

Atau kamu bisa memasukan kode diatas melalui plugin wordpress virtual robot.txt yang bisa kamu download disini.

Semoga bermanfaat.