Mar 13 2008

Robots.txt di wordpress

wordpress.gifMencoba trik lama yang baru mau aku praktekan tentang robots.txt. Tentu pernah denger dunk robots.txt? File ini berhubungan dengan crawler search engine, jadi yang aku tahu bahwa robots.txt ini bisa mengarahkan crawler seacrh engine mengenai url mana saja yang boleh mereka index atau baca dan dimasukan ke directory mereka *semoga tidak salah*. Berhubung aku menggunakan engine wordpress, jadi kita bahas saja mengenai robots.txt di wordpress.

Jadi begini cerita…kita buat sebuah file berekstensi .txt namanya robots. File ini berisi peraturan file/folder mana saja yang boleh di craw search engine dan mana yang tidak boleh. Secara garis besar, wordpress terdiri dari 3 folder utama, yaitu wp-admin, wp-content dan includes. Ketiga folder tersebut sebenarnya tidak diakses secara langsung karena wordpress menggunakan permalink url sesuai dengan aturan yang kita terapkan. Jadi yang tampak di address bar wordpress adalah hasil permalink, misalnya http://blog.bscore.net/category/judul-post.html. Jadi untuk mengefektifkan crawler search engine, kita buat aturan bahwa yang di craw adalah url seperti diatas, bukan http://blog.bscore.net/wp-admin/namafile.php. Nah…kurang lebih isi file tersebut adalah sebagai berikut:


User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content
Disallow: /tag
Disallow: /images
#artinya adalah tidak mengijinkan mengakses folder-folder diatas
 
# Google Image --> untuk search image
User-agent: Googlebot-Image
Disallow:
Allow: /*
 
User-agent: Mediapartners-Google*
Disallow:
Allow: /*
 
# http://www.sitemaps.org/faq.php
# Add Nonstandard extensions
Sitemap: http://www.askapache.com/sitemap.xml

Supaya lebih memudahkan dalam pembacaan, gunakan permalink yang mudah diinget(bahasa gaulnya SEF : Search Engine Friendly). Penjelasan mengenai permalink bisa di baca di codecnya wordpress dan yang aku gunakan adalah /%category%/%postname%.html karena menurut cerita juga .html sangat friendly sekali dengan search engine. So, sekarang tinggal tunggu hasilnya saja. Moga dalam sebulan ada pengaruhnya terhadap PR atau peringkat di search engine.

Popularity: 2% [?]

TAGS:

1 Comments on this post

Trackbacks

  1. ujang said:

    Bagaimana, sudah ampuhkah?

    March 19th, 2008 at 9:18 am

LEAVE A COMMENT

Subscribe Form

Subscribe to Blog