Alfina Febri: web crawler

Web Crawler atau yang sering kita kenal dengan sebutan Web Spider atau Web Robot merupakan suatu aplikasi dimana kita dapat membandingkan beberapa web yang terdapat di internet Web Crawler berkerja secara otomatis dengan membandingkan beberapa alamat website yang sering dikunjungi dan akan secara otomatis menyimpan semua bagian file yang terdapat didalamnya dalam folder komputer kita.

web crawler yang akan saya gunakan adalah http://win-web-crawler.soft32.com/free-download?rel=center. disini setelah kita menginstal akan muncul tampilan awal yang berisi data berupa analisa web yang akan kita kunjungi.

Proses mengunjungi setiap dokumen pada web clawler disebut dengan web crawling atau spidering. dari penganalisaan data pada web clawler kita bisa memvalidasi kode HTML dan juga mengumpuulkan alamat e-mail website yang kita analisa.

gambar1

Disini saya akan mengambil salah satu contoh situs website makanan cepat saji kfc. untuk memulai kita dapat memilih command button new yang terdapat di pojok kiri halaman awal web clawler. selanjutnya akan muncul tampilan halaman seperti pada gambar 1. kita pilih website/dirs

lalu masukkan alamat website kfc pada command list

lalu beri ceklis pada cekbox

dan tekan command button ok, maka data akan langsung diproses setelah selesai akan ada menghasilkan tampilan seperti gambar2


gambar2

maka secara otomatis isi file dari halaman website yang telah diproses akan masuk kedalam sebuah folder didalam tempat penyimpanan data software web crowler. isi dari folder tersebut data mengenai website yang telah dianalisa.

URL berisi tentang alamat website yang tersedia didalam website kfcindonesia.com

sumber:

Friday, March 30, 2012

web crawler

No comments:

Post a Comment