Hampir semua orang yang mengenal internet akan menggunakan search engine dalam menggali beragam informasi. Search engine sendiri menggunakan mesin otomatis pengumpul infromasi bernama spider yang berfungsi untuk merayap dokumen-dokumen di internet. Dengan spider semua dokumen di sebuah halaman web aakn diambil informassinya. Lalu bagaimana cara kerja spider sebuah search engine ?!?

Spider merupakan aplikasi komputer yang sifatnya hanya menyerap data berupa teks. Dengan teks tersebut beragam informasi seperti gambar, video, maupun tulisan biasa akan terangkum. Spider juga akan mengamati kata-kata apa saja yang sering muncul dari sebuah halaman web. Sebagai bagian dari search engine, maka spider akan mengumpulkan semua data dari dokumen sesuai dengan kepentingan dan algoritma masing-masing search engine.

Dengan begitu, spider juga akan melihat bagaimana bobot dari suatu kata dalam kalimat tersebut. Artinya berapa banyak kata yang bisa dimunculkan dari sebuah halaman web akan memiliki tingkat bobot yang berbeda dengan kata lainnya. Selain itu, karena spider hanya membaca teks maka gambar dan video dalam dokumen tersebut hanya akan diambil informasi teksnya saja. Sehingga muncul ALT, title pada sebuah gambar adalah untuk memberikan informasi tersebut pada spider search engine.

Untuk bisa mengetahui sebenarnya teks apa saja yang di tangkap oleh spider ketika berkunjung ke halaman web kita, beberapa simulasi spider telah ada di internet. Search Engine Spider Simulator, inilah salah satunya. Dengan Search Engine Spider Simulator ini kita bisa mengetahui kata apa saja yang terekam dan terbawa oleh sebuah spider.

Sehingga dengan mengetahui kata yang sering muncul, kita bisa memprediksi keyword apa yang cocok untuk optimasi halaman tersebut. Dengan mengetahui cara kerja spider search engine, maka teknik optimasi halaman tersebut akan lebih maksimal.