3 Mesin Telusur Beserta Nama Bot Crawler Yang Digunkannya

Sebuah mesin pencari dalam menyimpan data atau memperbaharui data yang di internet membutuhkan sebuah bot, kemudian bot tersebut melakukan perayapan di semua kode html di internet yang nantinya akan di index dalam database masing-masing penyedia mesin telusur, jika kalian seorang blog pastinya sangat mengerti bukan mengenai robot.txt.

Robot.txt dalam platform yang ada di blogger maupun wordpress berguna sebagai informasi kepada sebuah bot dari sebuah mesin telusur yang mungkin sedang melakukan sebuah aktifitas perayapan/crawler untuk memperbaharui data atau mengindex sebuah halaman maupun post mana saja yang di izinkan sesuai robot.txt yang sudah di setting penggunanya agar bot tersebut melakukan index terhadap halaman/post miliknya.

Namun ada banyak jenis robot yang di keluarkan untuk bekerja mencari data-data di internet bukan sebagai pengindexan saja tetapi bisa data analisis web atau lainnya, antara lain adalah sebagi berikut ini nama-nama bot yang digunakan sebagai pencari data beserta mesin pencari mana saja yang mempunyai bot tersebut.

1. Google

Nama robot yang dikeluarkan mesin telusur google dalam melakukan perayapan menjadi 7 robot namun kegunaan robot tersebut masing-masing mempunyai tugas yang berbeda, berikut nama-nama robot yang di keluarkan perusahaan google.

- Googlebot

- Googlebot-News

- Googlebot-Image

- Googlebot-Video

- Googlebot-Mobile

- Mediapartners-Google

- Adsbot-Google

2. Bing

Bing sendiri merupakan mesin telusur hasil dari gabungan antara live search, windows live search, dan terakhir MSN Search kita tau bahwasannya microsoft telah mengupgrade semua data yang dulu pernah di index pada mesin telusur tersebut lalu keluarlah mesin telusur jenis baru yaitu Bing, dalam melakukan perayapan data bing hanya mempunyai 1 bot yang bernama bingbot

3. Yahoo

Kita tau yahoo dahulunya adalah sebuah website yang dipergunakan sebagai pengiriman sebuah email, namun sekarang yahoo sendiri sudah mengukapkan jati dirinya bahwasannya mereka telah membuat sebuah mesin telusur, namun disini saya akan membahas nama bot yang di pergunakannya saja, yahoo sendiri sama halnya seperti bing hanya mempunyai 1 bot yang bernama Slurp

Sampai sini kalian sudah paham bukan, mengapa data yang di sajikan pada mesin telusur google sangat banyak sekali anda sendiri bisa membedakan berapa banyak bot pada ketiga mesin telusur tersebut, jadi mengapa google sering di panggil dengan kata "mbah" 😆😆

Sampai sini saja mengenai 3 mesin telusur dan nama bot crawler yang di gunakannya dalam merekap seluruh data yang ada di internet, terima kasih banyak telah berkunjung.

Share this post