Usaha Mengurangi Angka Restricted by Robots.txt

Sudah tahukah Anda tentang restricted by robots.txt di webmaster tools? Bagi Anda yang sering main webmaster tools tentu Anda tidak akan asing dengan hal tersebut. Beberapa saat yang lalu saya pernah membahas tentang perlu tidak menghapus laporan restricted by robots.txt di webmaster (baca: Apakah Restrcited by Robots.txt Perlu Dibersihkan?). Jawabannya adalah tidak perlu, nah bagi yang ingin lebih detail silahkan baca artikel tersebut.

Namun bagi yang merasa terganggu dengan laporan tersebut kita bisa meminimalisirnya. Perlu diketahui juga laporan restricted robots.txt didasarkan pada halaman-halaman dari blog kita yang tidak berhasil dimasuki oleh robot Google karena memang sengaja dibatasi. Contohnya adalah pada script related posts yang mengandung perintah anti duplicat.

Halaman Label...
Contoh di atas adalah yang di sengaja dibatasi oleh kita dengan penambahan script. Secara default sendiri Blogger telah menerapkan sistem pembatasan untuk halaman Label agar tidak dirayapi oleh mesin pencari. Hal ini untuk menghindari duplicat content (baca: Duplikat Konten). Salah satu yang menyebabkan laporan restricted robots.txt menjadi banyak adalah karena Anda menyisipkan link ke halaman label pada postingan Anda.

Agar kita bisa meminimalisir laporan tersebut, silahkan tambahkan rel nofollow setiap kali Anda mencantumkan link ke halaman label blog Anda. Berikut ilustrasi soal penggunaan nofollow dan tidak.

(klik untuk memperbesar)

Jika kita menambahkan atribut nofollow maka ketika google index dan melewati sebuah link tidak akan memeriksan link tersebut dan mengabaikannya. Artinya link yang kita tulis benar-benar hanya diperuntukkan untuk pembaca dan bukan untuk memperkuat SEO atau lain-lain. Sedangkan jika kita tidak set nofollow berarti link tersebut dofollow. Artinya ketika Google datang, ia akan memeriksa link tersebut. Karena link label secara default sudah dibatasi, maka ketika Google akan lakukan pemeriksaan link lebih jauh ia akan gagl akses masuk ke link tersebut dan mencatat laporan bahwa halaman link tersebut gagal dirayapi untuk kemudian dilaporkan ke webmaster tools.

Menulis Nofollow Untuk Link Halaman Label
Berikut adalah contoh penulisan link halaman label

<a href="/search/label/SEO">Kumpulan Artikel SEO</a>

Jika Anda ingin menambahkan rel nofollow, maka menjadi seperti berikut:
<a href="/search/label/SEO" rel='nofollow'>Kumpulan Artikel SEO</a>

Malam ini belajar webmaster tools lagi, semoga ini menambah pengetahuan Anda. Kita akan membahas lebih banyak hal kedepannya... Selamat malam dan sekali lagi semoga bermanfaat...