My Big Mouth and Stupid Thougths

Belajar SEO bagian 2: Content, Sitemap, dan Robots

Melanjutkan artikel sebelumnya masih mengenai belajar SEO. Kali ini adalah langkah-langkah mengoptimalkan content, sitemap dan robots file. Kalau yang sudah membaca artikel yang lalu, maka di sana membahas optimalisasi seo melalui keyword. Memang SEO lebih identik dengan keyword, tetapi keyword itu sendiri adalah sebagiannya saja. Masih banyak hal yang harus dipahami daripada hanya sekedar fokus pada keyword saja.

Konten (Content)

Konten lebih identik pada artikel atau bahasan pada suatu halaman. Dari semua hal yang ada pada suatu halaman situs, maka konten adalah komponen terpenting. Konten adalah yang dibaca dan menjadi perhatian utama bagi pengunjung. Coba bayangkan saja kalau suatu ketika kita mengetikkan suatu kata kunci di search engine dan lalu melakukan klik menuju artikel yang berhubungan dan mendapatkan kenyataan pahit bahwa bahasan atau konten artikel ternyata tidak ada hubungannya dengan kata kunci yang kita kehendaki. Karena konten merupakan hal terpenting, maka ada istilah “Content is The King”.

  1. Gunakan standard web secara baik dan benar pada semua bagian konten.
    Semua hal mulai dari metadata, struktur pengkodean, xHTML, CSS, javascript, dan seterusnya. Mengenai hal ini bisa dilihat pada artikel-artikel di blognya mas Dani di bagian category Web Standards atau bagian lainnya. Dan jangan lupa untuk melakukan test validitasnya di situs World Wide Web Consortium. Halaman situs yang tidak menerapkan standard baku ini akan menyusahkan search engine sewaktu melakukan scanning bagian-bagian penting pada situs.
  2. Pindahkan semua javascript dan elemen style ke dalam file, hindari penulisan langsung pada konten bersangkutan.
  3. Aktifkan fitur RSS (Really Simple Syndication) atau sejenisnya.
  4. Jangan menampilkan isi konten yang sama dengan alamat tautan (url) dan judulnya yang berbeda. Hindari duplikasi konten.

Peta Situs (Sitemap)

Sitemap dapat dibilang adalah peta situs dan berisi semua alamat tautan halaman. Dengan adanya sitemap akan memudahkan mesin pencari untuk memeriksa konten lanjutannya. Contoh yang perlu diketahui mengenai sitemap:

Contoh format isi File Syntax:

<?xml version="1.0" encoding="UTF-8"?>
<urlset xmlns="http://www.sitemaps.org/schemas/sitemap/0.9">
<url>
<loc>http://www.example.com/</loc>
<lastmod>2008-06-18T06:04:00+00:00</lastmod>
<changefreq>daily</changefreq>
<priority>1.0</priority>
</url>
</urlset>

catatan: sebaiknya tidak lebih dari 50.000 tautan, ukuran file tidak lebih dari 10 Mb, dan harus valid. Cek valid atau tidaknya file sitemap.xml ini dapat dilakukan secara online melalui Google Webmaster Tools atau situs lainnya. Alamat tautan (url) di dalamnya tidak boleh ada alamat sub-domain atau alamat tautan luar lainnya. Kalau ukuran file lebih dari 10 Mb maka lakukan pemecahan file, contohnya:

<?xml version="1.0" encoding="UTF-8"?>
<sitemapindex xmlns="http://www.sitemaps.org/schemas/sitemap/0.9">
<sitemap>
<loc>http://www.example.com/sitemap1.xml.gz</loc>
<lastmod>2008-06-18T06:04:00+00:00</lastmod>
</sitemap>
<sitemap>
<loc>http://www.example.com/sitemap2.xml.gz</loc>
<lastmod>2008-06-20T06:04:00+00:00</lastmod>
</sitemap>
</sitemapindex>

Jumlah file yang terbagi-bagi ini sebaiknya tidak lebih dari 1000 file.

Contoh lokasi file sitemap:

http://www.example.com/sitemap.xml
http://www.example.com/sitemap.xml.gz
http://www.example.com/sitemap.gz

Robots

Pengaturan robots ini digunakan untuk membatasi sampai sejauh mana dan apa saja yang search engine boleh lakukan dalam mengindeks situs kita. Sebagai contohnya kita tidak ingin suatu halaman tertentu dari situs dimasukkan dan ditampilkan ke dalam hasil pencarian melalui search engine, misalnya halaman login admin, jenis file atau folder tertentu.

Ada dua hal yang harus dilakukan berkenaan dengan robots ini, yaitu:

Buatlah pengaturan melalui meta tag untuk atribut robots di header, contohnya:

<meta name="robots" content="Arguments" />

contoh isi argumennya:

index : halaman dizinkan untuk diindeks
noindex : halaman tidak dizinkan untuk diindeks
follow : semua links pada halaman diizinkan untuk ditelusuri
nofollow : semua links pada halaman tidak dizinkan untuk ditelusuri
noarchive : halaman tidak diperbolehkan disimpan atau dicache

Catatan: ada beberapa argumen lainnya, namun tidak ditujukan untuk semua robots. Silahkan lihat penggunaan atribut robots di wikipedia.org.

Buatlah file robots.txt sesuai dengan standar yang telah ditetapkan.
Contoh isi file robots.txt:

User-agent: *
Disallow:

mengizinkan semua file untuk semua robots

User-agent: *
Disallow: /

menolak semua robots

User-agent: *
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /file/

tidak mengizinkan semua robots untuk mengindeks folder yang ditentukan

User-agent: Googlebot/2.1
Disallow: /file/

tidak mengizinkan robots Googlebot/2.1 untuk mengindeks folder /file.

catatan: untuk lebih mengetahui mengenai robots exclusion standard silahkan lihat di wikipedia.org.

Nah itulah sebagian lagi yang harus kita cermati dalam pembuatan situs agar lebih mudah diindeks dan mengatur apa yang mesti dilakukan oleh search engine pada situs kita. Kalau ada yang salah mohon kiranya dimaafkan saja, berhubung penulis juga masih awam mengenai hal ini. Silahkan beri masukan atau informasi.

Sumber asli: SEO Cheat Sheet v.04

Liked this page?
Subscribe to the RSS feed or to daily or weekly email updates, right now!
Share and Enjoy:
  • Digg
  • del.icio.us
  • StumbleUpon
  • Technorati
  • Facebook
  • Ping.fm
  • LinkedIn
  • FriendFeed
  • PDF
  • Twitter

51 Responses to “Belajar SEO bagian 2: Content, Sitemap, dan Robots”

  1. crow poc says:

    thanx bwat infonya….
    sangat membantu
    crow poc´s last blog ..Perang Armageddon My ComLuv Profile

  2. uwiuw says:

    bang tambahan bang, kalau penggunaan noarhieve pada meta robots itu memiliki efek samping kalau halaman tidak boleh dicache atau dibuat tembolok oleh search engine…..heheh cuma tambahan, kan ?

    ini artikel bagus juga. penjelasannya lebih baikd daripada saya hahahahahah. Lebih manusiawi dan argumennya ngurut. Walau ada baiknya di bagian akhir ada paragrap penutup yg menyimpulkan hubungan langsung konten, sitemap, dan robot. iya, seamcam kalimat intisari gitu loh bang hahahahha

    • no_mercy says:

      duh mas Aulia … saya ini gak bisa bener pakai tata bahasa yang baik dan bener … hahaha …
      saya tadinya bingung untuk mengganti kata archive itu sebaiknya apa agar mudah dipahami … akhirnya saya milih padanan ‘disimpan’ … mungkin sangat jauh ya artinya …. hahaha … tadinya memang tetep mau tulis ‘dicache’ atau ‘ditembolok’ … tapi mikirnya apa ngerti itu ya …. hahaha … saya sendiri gak ngerti … :lol:
      oke deh … saya tambahkan aja ya di artikel … terma kasih mas :)

      iya mas … baru nyadar … padahal dah berkali-kali diingetin kalau nulis jangan lupa awal dan akhir … hehehe … :D

  3. thanks yach infonya :)

  4. achoey says:

    Sahabat
    Ku yakin banyak bgt yang telah merasakan manfaat blogmu ini

  5. Heryan Tony says:

    Boss, kalo di wp tempat meletakkan meta tag di header file apa ya? Soalnya ada posting yang mau dihapus dari cache mesin pencari dengan tag noarchive.

  6. Dum says:

    wah, mengamini karena memang tak memahami. :)

    • no_mercy says:

      sesuai tagline blog ini saya juga begitu mas … sebenarnya lebih banyakan gak ngertinya tetapi masih juga nekat nulis yang ginian … hehehe … hitung-hitung mancing para saudagar kaya ilmu biar bisa berbagi di sini … :)

  7. dani says:

    terkait dengan disallow nothing di robots.txt plus pengoptimalan internal link tag dan categories, menurut statistik blog ini:
    lebih banyak yang datang dari url post utama atau url tag/category?

    eh kayaknya kemarin-2 blog ini make disallow nothing deh..ato saya yang salah intip ya.. :D

    • no_mercy says:

      menurut statistik dari google analytics dan local statistik, hampir 90% pengunjung langsung mendarat di url artikel, hanya sekitar 8% yang mendarat di halaman depan, dan sisanya dari tags/category (yang terakhir ini mungkin dari sisa-sisa yang lama … soalnya yang sekarang blog ini diseting supaya tags dan category tidak datang dari luar) …
      idenya saya mau mencoba seberapa besar pengaruhnya kalau yang terindex hanya url artikel + halaman depan saja … mmmm .. memang sih jumlah halaman yang terindex di mesin pencari menjadi sangat minim … saya belum tahu efek kelanjutannya :) … apakah ini bagus ya?

      soal disallow nothing itu rasanya dah lama juga … memang mas kemarin-kemarin dicoba pakai disallow nothing … ini diubah karena pengen coba-coba aja efeknya sampai sejauh mana …
      kalau dari hasil analisis google sih sudah lumayan lebih baik kalau pakai yang sekarang ini …

      • dani says:

        walau dikasi nofollow ama dicegah robots.txt, tapi kalo ada link mengalir ke alamat-alamat tersebut, tetep dapet ‘perhitungan’ di mata google kan ya..cmiiw

      • ganda says:

        @dani: bener juga. gimana dengan kasus seperti itu?
        ganda´s last blog ..Offline Tools : HTML Special Chars Escape Tools My ComLuv Profile

      • no_mercy says:

        rasanya sih iya mas … untuk google rasanya popularitas situs bukan hanya dilihat dari linknya saja tetapi juga penyebutannya … dengan kata lain kalau link adalah suatu kata atau kalimat yg di belakangnya disertai dengan sebuah tautan menuju lokasi lain, sedangakan penyebutan misalnya kata atau kalimat tersebut terkait juga dengan situs dimaksud …
        contohnya: mas Dani, http://daniiswara.net, daniiswara.net atau hanya Dani Iswara (tetapi kalau mas kalimat ‘mas Dani’ saja mungkin tidak karena bersifat umum) …
        secara logika algoritmanya saya tidak memahaminya, tetapi secara logika database pastilah memiliki keterkaitan antara ketiganya … *ini opini saya saja*

      • ganda says:

        dari beberapa algoritma yang sempat saya pelajari tentang string searching dan algoritma untuk string lainnya, untuk melihat relevansi antara link tersebut. CMIIW..
        Tapi kemungkinan Google menggunakan lebih dari satu algoritma untuk mendapatkan akurasi mendekati 100%, walau (mungkin) tidak akan bisa 100% tanpa bantuan manusia. :D … untuk itulah google sudah menerapkan bantuan manusia dalam search engine, dalam contoh menerapkan rating.. :D CMIIW lagi
        ganda´s last blog ..Offline Tools : HTML Special Chars Escape Tools My ComLuv Profile

      • no_mercy says:

        setuju sekali bang … itulah sebabnya saya lebih suka memakai sistem pemeringkatan google daripada yang lain (alexa contohnya) … karena google menggunakan rumusan yang cukup rumit untuk menggabungkan beberapa elemen tambahan …

  8. cebong ipiet says:

    begh begh begh para bapak bapak ini ya xixiixixix duuh tau ku cuman nulis ama nggambar thok :D
    sukur sukur deh kalo nyantol di sech enjin
    cebong ipiet´s last blog ..Umpatan Jalanan Ibukota My ComLuv Profile

  9. annosmile says:

    klo pake wordpress kan tinggal pasang plugins..
    he3x..
    annosmile´s last blog ..Berkunjung Ke Taman Safari Indonesia II Prigen My ComLuv Profile

    • no_mercy says:

      tetapi terkadang plugin juga mesti dioprek lagi mas biar lebih pas … apalagi soal kebutuhan standar web … ada juga plugin yang gak terapin standard web dengan benar …

    • ganda says:

      Selain itu, plugin itu di setting secara default setiap pertama kali instalasi, jadi kita harus sesuaikan lagi agar mendapatkan performa 100%
      ganda´s last blog ..Offline Tools : HTML Special Chars Escape Tools My ComLuv Profile

      • no_mercy says:

        malah terkadang ada yang menyesatkan … hahaha :lol:
        tetapi yang bikin pusing ketika sudah tidak kompatibel lagi dengan engine wpnya .. mesti mencari dimana perbedaannya …

  10. ariosaja says:

    Sip, matur tengkyu tutorialnya
    ariosaja´s last blog ..Akhirnya Langganan Telkomsel Flash Unlimited My ComLuv Profile

    • no_mercy says:

      saya juga mau nerapin yang bener juga mas … blog ini masih banyak salahnya … hehehe :D
      ya .. sama-sama belajar …

  11. Pradna says:

    wah,wah…tulisan seperti ini nih yg harus dimasukkan tembolok saya, buat dipraktekkan dikemudian hari…karna saya baru mulai belajar beginian (belajar terus,kpn prakteknya).

    Makasih sangad infonya *menjura dalam-dalam*
    Pradna´s last blog ..Shinobi My ComLuv Profile

    • no_mercy says:

      memang sih belajar paling enak sambil praktek … biar lebih cepet prosesnya …

      kembali kasih mas … *balas ikut menjura … lebih dalam … lebih dalam — eh, seperti mas tommy rafael saja :D * …

  12. sep banget nehhh
    tngkyu yaaa
    :0

  13. rismaka says:

    Haduuhh.. ga bisa comment apa-apa, coz udah dijelaskan secara lengkap oleh mas admin…
    Numpang nongol wae lah :D

    */usul mas, gimana klo ngebahas masalah penyebaran keyword di komentar dan kaitannya dengan peningkatan SERP? Beberapa postingan saya mendapat arus banyak gara-gara banyak komentar bermutu di situ. Contohnya postingan ttg Smart Haier D1200P/*
    rismaka´s last blog ..WordPress Versi 2.8 Baker Telah Dirilis My ComLuv Profile

  14. rizoa says:

    disalow wp-content juga.. biar aman…

  15. TOP info…
    Salam hangat selalu mas.
    wahyu ¢ wasaka´s last blog ..Entah . . . My ComLuv Profile

  16. aRuL says:

    wah terima kasih infonya, menarik sekali…
    sy sedang belajar SEO jg nih :)
    aRuL´s last blog ..Film Ketika Cinta Bertasbih I My ComLuv Profile

  17. febri says:

    kalo pake all in one seo pack,semuanya udah di atur kan y ka’?
    kalo bikin manual robot txt nya perlu disubmit juga ga’ ka’?
    febri´s last blog ..belajar seo para pemula My ComLuv Profile

    • no_mercy says:

      yups … hampir semua dapat diatur melalui plugin all in one seo pack atau platinum seo … kecuali untuk pengaturan di file robots.txt … pengaturan filter robots pada plugin tersebut terbatas pada pengaturan secara global melalui metadata di header …

      file robots.txt tidak perlu disubmit, file tersebut hanya untuk filterisasi ketika berbagai robots mencoba menelusuri situs … hampir sama dengan yang di metadata header, tetapi kalau menggunakan file robots.txt dapat dilakukan filterisasi lanjutan yang sangat spesifik …

  18. heri says:

    Maksih ya..cuma masih bingung
    heri´s last blog ..DBS Kendaraan Yang Tepat Untuk Memiliki Penghasilan Luar Biasa My ComLuv Profile

  19. Heryan Tony says:

    Terima kasih banyak atas jawaban dari para master.

  20. mas stein says:

    walah, kalo saya nulis dan memodifikasi artikel dengan mikocok word otomatis kode xhtml-nya ndak valid, brarti dari sisi SEO ini ndak bagus ya boss?
    mas stein´s last blog ..Tukang Becak, Tukang Pijet, dan Hotel Esek-esek My ComLuv Profile

    • no_mercy says:

      yups banyak sekali terjadi setelah copy-paste malah membuat layout atau tampilan halaman menjadi kacau … atau secara teknis menjadikan halaman tidak valid lagi … karena itu lebih baik menulisnya di editor teks murni … memang untu beberapa attribute jadi manual ditambahkan sendiri, tetapi lebih aman … kalau enggak, kita dapat menggunakan beberapa aplikasi blog visual editor atau plugin/extension untuk browser …

  21. Setiap Search Engine memiliki algoritma atau konsepnya sendiri untuk menilai sebuah halaman pada situs.
    Dengan cara memahami faktor-faktor umum yang mempengaruhi algoritma tersebut,
    hal itu berarti dapat juga mempengaruhi posisi Anda dalam hasil pencarian yang dilakukan oleh calon pengunjung.
    Inilah yang menjadi tujuan utama seorang ahli SEO. Pekerjaan SEO memiliki dua aspek yaitu: On-situs and Off-situs.

    Salam dari kami :
    KOMUNITAS PELAJAR ILMU KOMPUTER INDONESIA

Disarankan untuk tidak nge-junk iklan, refferal afiliasi, dan sejenisnya tanpa seizin admin. Isilah nama, email dan alamat website dengan sebenar-benarnya. Baca disclaimer.

Leave a Reply


CommentLuv Enabled

You can follow any responses to this entry through the RSS 2.0 feed. You can leave a response, or trackback from your own site.