TUGAS PERTEMUAN 9 PENGANTAR WEB SCIENCE

RANGKUMAN TUGAS WEB CRAWLER MATA KULIAH PENGANTAR WEB SCIENCE Disusun Oleh: Ananda Nurlita (50420166) 2IA18 TEKNIK INFORMATIKA UNIVERSITAS GUNADARMA 2022 1. DEFINISI WEB CRAWLER Web crawler atau yang juga dikenal web spider, spider bot, web bot, crawler, adalah sebuah program software komputer yang digunakan oleh mesin pencari untuk mengindeks halaman web dan konten yang dimiliki setiap website. Web crawler adalah sebuah tool untuk mengindeks dan mengunduh konten dari internet, lalu disimpan ke dalam database mesin pencari. Sehingga saat ada orang yang mencari suatu informasi, mesin pencari akan langsung menampilkan hasil yang relevan dari database tersebut. Proses Indexing adalah semacam pembuatan ‘katalog perpustakaan’ di internet, sehingga internet dapat mengetahui ke mana harus mengambil informasi saat pengguna melakukan pencarian. Pros...