Saat ini kegiatan bisnis jual beli sudah menjadi hal umum yang sering dilakukan oleh banyak masyarakat. Kebutuhan hidup yang semakin meningkat dan jumlah masyarakat yang juga meningkat, membuat transaksi jual dan beli semakin meningkat seiring dengan berjalannya waktu. Oleh karena itu diperlukan media yang sangat membantu untuk proses transaksi jual dan beli tersebut sehingga penjual dapat mempromosikan dan mempublikasikan barang dagangannya pada para pembeli dan pembeli pun dapat mencari barang yang diinginkan dengan lancar.
Pengguna website di Indonesia pada tahun 2013 mencapai 74 juta pengguna (marketers 2013) dan dalam 5 tahun terakhir meningkat sebanyak 430% (Yasser Paragian 2014). Dari fakta diperoleh bahwa sebuah website dapat digunakan untuk mendukung proses transaksi jual beli. Di Indonesia sendiri ada banyak website jual beli yang tersedia bagi masyarakat, misalnya OLX.co.id, berniaga.com, bukalapak.com, dan lain sebagainya. Akan tetapi karena banyaknya website yang tersedia maka masyarakat harus mencari ke setiap website jual beli yang ada. Maka dari itu di rancang sebuah system web crawler yang menggunakan teknik scraping data yang mana dapat menggabungkan hasil pencarian data dari beberapa website jual beli dan menampilkannya.
Fitur-fitur yang akan dikerjakan pada tugas akhir ini adalah pencarian barang dengan hasil yang terurut sesuai dengan yang diinginkan user dalam kasus ini adalah tanggal pembuatan iklan, lokasi barang, dan harga barang serta menampilka recent update dari data barang terbaru. Lama waktu yang dibutuhkan untuk menampilkan hasil pencarian data bergantung kepada beberapa aspek salah satunya kata kunci yang digunakan. Semakin spesifik kata kunci yang digunakan maka semakin sedikit pula waktu yang dibutuhkan untuk proses scraping data nya.
Kata Kunci: Website, Web crawler, Scraping Data, Jual Beli