WEB CRAWLER



Apa itu Web Crawler !
          Membahas web crawler tak ada bedanya seperti menyinggung spider. Mengapa demikian? Sejujurnya keduanya itu bagai cermin, definisi serupa hanya terbungkus dalam istilah kata berbeda. Ya, crawler itu nama lain dari spider dan begitu pula sebaliknya. Sebagaimana dilansir dari laman TechTarget, crawler adalah sebuah program buatan yang bertujuan mengunjungi situs dan membaca semua halaman serta informasi untuk menghasilkan catatan penting bagi index search engine.
          Peran web  crawler sudah tidak tergantikan dan semua layanan search engine butuh itu. Masing-masing mengusung nama berbeda meski berlatar belakang sama, tak heran ada pihak yang menyebutnya spider atau bot. Crawler sengaja diprogram untuk mengunjungi semua situs yang diajukan atau submit ke layanan mesin pencari. Tak hanya keseluruhan situs, melainkan semua halaman satu per satu, entah itu artikel baru rilis dan diperbarui.

          Crawler sengaja dirancang khusus agar selektif mengunjungi dan mengindeks situs secara utuh atau halaman spesifik saja. Lalu, mengapa diberi nama demikian? Ternyata semua merujuk pada cara kerja, dimana program merayap atau bergerak pelan sekali menyusuri sebuah situs dan halaman pada waktu bersamaan. Bahkan turut mengikuti link dari satu halaman ke halaman lain hingga semua halaman selesai terbaca.

 https://www.seon.co.id/apa-itu-indexer-web-spider-web-crawler-robot-spider-pada-search-engine/

Komentar

Posting Komentar

Postingan populer dari blog ini

KELEBIHAN DAN KELEMAHAN E - BUSINESS

kelebihan dari e-business a. Akses yang mudah           Maksudnya supaya dapat terhubung atau berinteraksi jarak jauh atau tidak langsung dengan konsumen, para pembisnis hanya membutuhkan koneksi internet yang memadai. b. Lebih tepat sasaran           Jadi para pembisnis yang mempromosikan produknya akan lebih tepat sasaran, sehingga konsumenpun akan bertambah. c. Menghemat waktu           Jika untuk berinteraksi ataupun bertransaksi harus menemui konsumen atau menemui rekan bisnis, maka dengan e-business komunikasi dapat dilakukan secara online di internet sehingga dapat menghemat waktu. d. Tidak membutuhkan modal yang terlalu besar           Kebanyakan slalu orang beranggapan bahwa untuk memulai suatu bisnis membutuhkan modal yang cukup besar, khususnya dalam melakukan promosi produk yang akan di jual. Sedangkan sekarang ini dapat dilihat banyak sekali orang yang berbisnis menggunakan internet atau secara online dengan modal yang sedikit atau tidak terlalu besar.
Baca selengkapnya

SMALL WORD (STRUKTUR WEB)

            Small World Network adalah sebuah tipe grafik matematikal yang dari banyaknya simpul , namun tidak berhubungan dengan simpul yang lainnya (berbeda) , tetapi banyak nya simpul bisa menjangkau setiap simpul kecil lainnya. Khususnya, small-world network didefinisikan sebagai jaringan di mana L jarak antara dua node yang dipilih secara acak (jumlah langkah yang diperlukan) tumbuh secara proporsional dengan logaritma dari jumlah node N dalam jaringan, yaitu dalam konteks jaringan sosial, hasil dalam fenomena small world netwok untuk orang asing (orang tak dikenal) yang dihubungkan dengan cara berinteraksi. Banyak grafik empiris dengan baik dimodelkan oleh jaringan-dunia kecil. Jaringan sosial, konektivitas internet, wiki seperti Wikipedia, dan jaringan gen semua karakteristik small world network. Contoh Klasifikasi Small-World Network:             Sebuah kategori tertentu small world network diidentifikasikan sebagai kelas grafik acak oleh Duncan Watts dan Steven Strogatz
Baca selengkapnya

ABSTRAKSI DAN GENERALISASI

ABSTRAKSI DAN GENERALISASI 1.       Abstraksi           Abstraksi adalah deskripsi dari suatu masalah pada level generalisasi tertentu, sehingga memungkinkan kita untuk berkonsentrasi pada aspek kunci dari masalah tersebut tanpa memperhatikan hal-hal detail. Abstraksi dapat membantu kita untuk fokus pada hal-hal penting dari suatu masalah. Abstraksi melibatkan pengidentifikasian kelas-kelas (classes) dari suatu object, sehingga memungkinkan kita menggroupkannya. Dengan cara tersebut kita bekerja dengan sedikit parameter/variabel dari kelas-kelas yang ditinjau. Contoh : •        Monitoring : berbagai macam sistem monitoring •        Ban sepeda : sepeda balap, sepeda gunung •        Mobil : sedan, jeep, wagon, truk, dll 2.       Tingkatan Abstraks •        Abstraksi Fungsional Komponen mengimplementasikan satu fungsi, misalnya fungsi matematika. Pada intinya interface merupakan fungsi itu sendiri. •        Pengelompokkan Kasual Komponen merupakan sekumpulan ent
Baca selengkapnya