Skip to main content

Penjelasan Dan Nama Perayap Mesin Pencari

Pada dasarnya, setiap mesin pencari mempunyai system yang disebut sebagai spider atau robot mesin pencari atau biasanya kita sebut sebagai robot perayap search Engine yang bertugas menemukan setiap URL yang ada pada blog atau website kita melalui tautan yang terhubung di situs kita agar nanti konten yang kita miliki bisa muncul di dalam mesin pencari. namun, tidak semua halaman atau konten yang kita miliki bisa ditampilkan di mesin pencari, itu karena robot perayap sangat menghargai file robots.txt yang ada di blog dan website kita. sehingga kita bisa mengatur mana yang harus ditampilkan dan tidak di halaman pencari. nah, ada baiknya kamu mengenal nama perayap yang mengunjungi blog atau website kita yang biasa disebut User-agent di dalam file robot txt agar nantinya kamu bisa melakukan control pada perayap yang mengunjungi situs kamu.

bagi kamu yang ingin belajar robots.txt, silahkan baca posting saya tentang penjelasan dan cara membuat robots.txt. mari kita mulai pelajaran tentang mengenal nama perayap search engine.

Nama Perayap Google
1. Googlebot
perayap yang satu ini bertugas untuk mengambil dan mengirim URL yang diminta oleh para pengguna dengan cara mengetikkan kata kunci di halaman pencarian. dan bukan hanya itu, perayap ini juga bertugas untuk mengirim setiap URL untuk di index ke dalam mesin pencari, dan melakukan update jika ada perubahan konten pada URL lama lalu kemudian dikirim ke system google lagi untuk proses selanjutnya.

2. Googlebot-News
perayap ini digunakan khusus untuk para pemilik website atau blog berita. seperti yang kamu tahu, google mempunyai mesin pencari berita. nah, jika kamu tidak ingin konten kamu muncul di halaman pencarian berita (bukan halaman pencari yang biasa digunakan). kamu bisa mengatur beberapa kontenmu agar tidak tampil di halaman pencari berita.

Contoh halaman pencari berita
Contoh halaman pencari berita

3. Googlebot-Image
Perayap ini khusus digunakan untuk melakukan index pada gambar-gambar yang ada di website dan blog kamu lalu kemudian dikirim ke system untuk proses selanjutnya. lihat contoh gambar di bawah ini. maka dari itu sebuah gambar haruslah mempunyai alt dan title image agar dikenali oleh bot yang satu ini.

Contoh halaman pencari gambar
Contoh halaman pencari gambar

4. Mediapartners-Google
perayap yang satu ini tugasnya melakukan cek pada iklan yang biasa kita kenal sebagai Adsense, Doubleclick, dan sebagainya. tugas perayap ini tidak hanya sebatas melakukan cek. tapi juga melakukan index pada halaman URL agar tahu bahwa halaman website dan blog mana yang pantas untuk menampilkan iklan.

5. AdsBot-Google
perayap yang satu ini bertugas untuk melakukan cek pada nilai rank halaman atau halaman landas kita yang biasa disebut sebagai pagerank. dan perayap ini juga mengatur laman teratas blog atau website kita. kesalahan dalam setting robot.txt akan menyebabkan halaman atau URL dan bahkan blog atau website kita tidak akan mendapatkan nilai ranking yang benar atau malah turun. jadi saran saya biarkan saja default jika tidak ingin melakukan kesalahan.

nah itulah nama perayap google beserta penjelasannya. selanjutnya saya akan sebutkan nama perayap dari Bing (Yahoo). kedua website tersebut sudah bekerja sama. jadi jika kita ingin website atau blog kita terindex di yahoo, maka kita harus submit blog dan website kita di alat webmaster bing.

Nama Perayap Bing Dan Yahoo
Msn Bot dari bing dan Msn.
Yahoo Slurp dari Yahoo.

hanya itu nama perayap yang ada di bing msn dan yahoo sejauh yang saya ketahui. mungkin ada juga nama yang lain yang tidak saya ketahui. tapi, tugasnya pun sama. yaitu merayapi URL  blog dan website kita agar di index lalu kemudian di proses oleh system dan pada akhirnya muncul di mesin pencari.

demikian pembahasan kita tentang Penjelasan tentang perayap yang disebut sebagai robot atau spider dari masing-masing mesin pencari yang terkenal. sampai bertemu lagi pada posting saya yang lain, dan berikutnya kita akan membahas tentang pembuatan robots.txt. salam hangat dari saya.

Comments

  1. terima kasih informasinya. oh ya saya mau bertanya kalau yandex search engine nama robot perayapannya apa ya??

    ReplyDelete
  2. untuk nama perayap yandex, saya kurang tahu. agar bisa dirayap kita perlu daftarkan ke yandex, dan cukup menggunakan kode all (bintang) untuk semua perayap. agar tidak error. letakkan kode tersebut di bawah atau paling atas. dan tetap gunakan pengaturan nama perayap lain agar rapi. jadi misalnya ada kode all, maka semua nama perayap baik itu yahoo, google, bing, msn, yandex akan merayap situs kita. kita bisa tambahkan pengaturan nama perayap seperti diatas. jadi biar semua bisa merayap namun ada batas. semoga dipahami.

    ReplyDelete

Post a Comment

Masukkan Komentar anda disini. mohon maaf, Link Aktif yang ada di dalam komentar akan terhapus secara otomatis oleh system blog ini.
komentar akan di tampilkan setelah disetujui oleh admin. terima kasih

Baca Juga :

Cara Memperbaiki Keyboard Laptop Tertekan Sendiri

Beberapa waktu lalu, saya memperbaiki keyboard laptop yg tertekan sendiri. sebenarnya dulu sudah pernah saya bahas. namun setelah saya analisa lebih lanjut. ada beberapa hal yg ditemukan oleh saya dan menurut saya apa yg sering di bahas kemungkinan ada sedikit kesalahan. sebagai contoh, menggunakan pemotong untuk menggores lapisan keyboard pada laptop yg bisa mengakibatkan kerusakan fatal. pada hari ini, saya akan coba jelaskan kenapa komponen keyboard kita dan apa yg harus kita lakukan untuk memperbaikinya.

Berdasarkan analisa yg telah saya kumpulkan untuk memperbaiki keyboard laptop.
Menggunakan pemotong untuk memperbaiki keyboard sebenarnya boleh, namun jika mengenai jalur utama pelat besi pada keyboard laptop,

Memperbaiki Hasil Cetakan Printer Canon Kabur Atau Buram

Ketika kita sedang asyik mencetak dokumen yang telah kita buat menggunakan printer kesayangan kita, tiba-tiba saja tinta pada printer kita telah habis. karena kita sudah mempersiapkan tinta cadangan untuk printer, kitapun melakukan pengisian ulang pada katridge kita yang habis. namun sayang sekali, setelah mencetak dokumen kembali, hasil yang dikeluarkan oleh printer kita ternyata kabur atau buram. nah, hari ini, saya akan coba jelaskan kepada kamu penyebab hasil cetak pada printer menjadi kabur atau buram (Panduan ini khusus untuk printer Canon).
1. Penyebab utama hasil cetak pada printer tidak jelas, kabur atau buram. ada beberapa hal yang menyebabkan semua ini, dan akan saya coba jelaskan satu per satu. dimulai dari katridge bocor (head rusak). mengisi tinta terlalu penuh, head katridge tersumbat, dan kesalahan pada pengisian tinta. mari kita mulai.

Cara Memperbaiki Modem Tidak Terdeteksi di Laptop dan Komputer

saat pertama kali menggunakan modem untuk browsing internet, modem tidak ada masalah apapun. tapi sekarang, ketika kita mencoba browsing internet lagi dan menyalakan modem yang kita miliki, muncul tulisan tidak ada koneksi atau modem tidak terdeteksi di windows 7 pada laptop dan komputer kita. biasanya di ikuti dengan koneksi yang hilang. nah, hari ini, berdasarkan dari pengalaman saya, kita akan coba memperbaiki modem tersebut dan membuatnya kembali normal seperti biasanya. sebelumnya saya akan jelaskan terlebih dahulu penyebab modem tidak terdeteksi.
Penyebab Modem Tidak Terdeteksi. modem tidak terdeteksi biasanya diakibatkan oleh pelepasan modem secara langsung atau dikarenakan infeksi dari virus. saat kita selesai browsing internet, biasanya kita akan melakukan Disconnect pada modem kita dan meelepasnya

Cara Memunculkan Sticky Notes Di Desktop

Pertama, saya ingin mengatakan bahwa tutorial ini hanya khusus untuk pengguna komputer dan laptops yang mempunyai system OS windows 7. kegunaan dari notepad sendiri pasti sudah kamu ketahui. mungkin lebih pas jika disebut sebagai pengingat pesan. dan cara ini sudah diterapkan pada komputerku sendiri. kegunaannya agar kita bisa mengingat sebuah pesan seperti letak data games yang saya buat sendiri, tugas yang harus saya kerjakan serta hal yang penting lainnya. jadi, setiap menyalakan komputer sendiri, maka saya bisa melihat pesan tersebut dan pada akhirnya ingat akan tugas saya. lalu bagaimana dengan laptop atau komputermu?

Memperbaiki Printer Canon MP 280 atau 287 Error B500 P07

Hari ini saya akan membahas tentang kerusakan printer Canon mp 280 287 yang mengalami error P07. jika kamu melihat di layar komputer dan laptop, kamu akan melihat error B500. tapi, sebelumnya saya akan jelaskan terlebih dahulu penyebab dari kerusakan ini. lalu kemudian kita akan memperbaiki error tersebut.

Penyebab Printer Canon MP 280/287 Mengalami Error P07 atau B500.
Kerusakan ini terjadi karena deteksi tinta pembuangan pada printer telah mencapai batas maksimal. jika dibiarkan maka akan mengakibatkan tinta di dalam printer menjadi meluap (ibarat air yang sudah penuh kemudian di isi lagi hingga tumpah). ada juga penyebab lainnya adalah sensor