31 Comments

Apa Itu Search Engine Spider?

Spider mesin pencari, kadang-kadang disebut crawler, yang digunakan oleh mesin pencari Internet untuk mengumpulkan informasi tentang situs Web dan halaman Web individu. Mesin pencari membutuhkan informasi dari semua situs dan halaman; kalau tidak mereka tidak akan tahu apa halaman untuk menampilkan dalam menanggapi permintaan pencarian atau dengan apa yang prioritas.
Spider mesin pencari merangkak melalui internet dan membuat antrian situs Web untuk menyelidiki lebih lanjut.

Sebagai situs Web tertentu akan tertutup oleh laba-laba, laba-laba membaca melalui semua teks, hyperlink, meta tag (meta tag secara khusus diformat kata kunci dimasukkan ke dalam halaman Web dengan cara yang dirancang untuk laba-laba ditemukan dan digunakan) dan kode . Dengan menggunakan informasi ini, laba-laba memberikan profil untuk mesin pencari.

Laba-laba kemudian mengumpulkan informasi tambahan dengan mengikuti hyperlink pada halaman Web, yang memberikan koleksi yang lebih baik dari data tentang halaman tersebut. Ini adalah alasan bahwa memiliki link pada halaman Web Anda – dan, bahkan lebih baik, halaman Web lain terhubung dengan Anda – sangat berguna dalam mendapatkan situs Web Anda ditemukan oleh mesin pencari.