Cara Kerja Search Engine Dibalik Layar
Cara Kerja Search Engine Dibalik Layar
Biasanya para master SEO pada umumnya menjelaskan Riset Keyword di awal dari setiap pembelajaran, namun kali ini penulis akan mencoba sesuatu yang berbeda. Yang akan merubah mindset Anda mengenai cara kerja Search Engine pada umumnya, sebagai contoh kasus kita akan menggunakan search engine raksasa yang populer pada saat ini yaitu Google.Google terdiri dari 2 bagian, yang pertama adalah bagian crawlernya, robot yang berkeliaran untuk mencari data berupa halaman website, dan yang kedua adalah index web, yang kedua ini adalah bagian yang setiap hari kita gunakan, setiap kali kita akan mencari sesuatu dengan cara mengetikan keyword dikotak pencarian.
Bagian yang pertama yaitu crawler, atau biasa disebut sebagai bot spider, googlebot saat ini sudah sampai versi ke 2.1, dan bertugas sebagai crawler atau bot spider screen scraper.
Googlebot 2.1 atau crawler berfungsi sebagai robot yang terus merayapi, untuk terus menerus mencari data,berita,artikel terbaru berupa halaman website yang uptodate.
Maksudnya seperti apa?
Anggaplah seperti ini, Anda adalah googlebot, tugas Anda adalah mengecek semua website di dunia, apakah ada situs terbaru yang terdaftar, atau adakah pembaruan atau update dari situs yang lama yang sudah masuk ke dalam database penyimpanan? Kemudian Anda akan masuk ke dalam sebuah situs server dunia yang di mana terdapat nama nama website atau domain terbaru yang terdaftar, setelah itu Anda mengunjungi satu persatu websitenya, dan setiap halaman dari semua website itu Anda kunjungi pula, dan Anda simpan setiap halaman dari semua website itu ke dalam sebuah tempat penyimpanan data, anggaplah flashdisk. Tentunya Anda pun membuat semacam daftar halaman apa saja yang sudah disimpan, dan diambil di website mana, waktunya kapan.
Setelah anda melakukan itu semua, maka di hari berikutnya anda pun melakukan hal yang sama, di tambah dengan mengunjungi situs yang sebelumnya pernah dikunjungi, anda mengecek apakah ada halaman yang baru.
Begitulah googlebot bekerja, robot internet ini bekerja layaknya manusia yang sudah saya jabarkan di atas. bedanya adalah ini semua dilakukan secara otomatis dan natural, manusia tidak ikut campur tangan, karena tidak ada operator sama sekali dalam kegiatan crawler yang dilakukan oleh google. Semuanya dilakukan oleh mesin. Sehingga ketika kita masuk ke dalam www.google.com dan mengetikan suatu keyword misalkan belajar seo di google, maka anda akan mendapati banyak sekali halaman-halaman website ditampilkan sesuai dengan keyword yang diketikkan di kotak pencarian. Halaman halaman website ini di ambil oleh googlebot 2.1 yang sebelumnya telah mengcrawl, mengunjungi halaman website tersebut dan menyimpannya di dalam database google, sehingga Anda bisa langsung melihat hasil dari setiap keyword yang Anda ketikkan di dalam kotak pencarian milik google.
Teknis cara kerja googlebot adalah seperti ini :
- Pengecekan database submit url atau pengecekan direktori web
- Crawler mengecek web di direktori
- Masuk ke halaman depan web
- Mengecek satu persatu link di halaman depan sambil indexing
- Masuk ke dalam halaman, dan mengecek satu persatu link yang ada dalam halaman, sampai halaman tersebut tidak memiliki link ke luar
Dari cara kerja google seperti inilah kemudian para master SEO mencari-cari celah agar halaman websitenya bisa muncul dihalaman pertama google. Ilmu tersebut bernama SEO, Search Engine Optimization. Sehingga dari sini pula lah google mengeluarkan aturan-aturan untuk mengurangi kegiatan pemaksaan google agar memunculkan halaman yang diseokan itu muncul dihalaman pertama google.
sumber : ilmuwebsite