| Call Number | SK-2565 (Softcopy SK-2047) Source Code-895 |
| Collection Type | Skripsi |
| Title | Membangun Sistem Data Acquisition Pipeline Peraturan di Indonesia untuk Aplikasi Lexin |
| Author | Nico Fathi Rizqi; |
| Publisher | Depok: Fasilkom UI, 2025 |
| Subject | Web Scraping, Data Acquisition Pipeline |
| Location | FASILKOM-UI; |
| Nomor Panggil | ID Koleksi | Status |
|---|---|---|
| SK-2565 (Softcopy SK-2047) Source Code-895 | TERSEDIA |
Nama : Nico Fathi Rizqi Program Studi : Ilmu Komputer Judul : Membangun Sistem Data Acquisition Pipeline Peraturan di Indonesia Untuk Aplikasi Lexin Pembimbing : Adila Alfa Krisnadhi, S.Kom., M.Sc., Ph.D Aplikasi Lexin memerlukan data kumpulan undang-undang yang disediakan pada laman publik. Untuk itu diperlukan suatu program untuk mendapatkan data peraturan perundangundangan di Indonesia untuk disimpan pada basis data yang disediakan. Pengembangan ini bertujuan untuk membangun sistem DAP yang memenuhi kebutuhan tersebut. Sistem bekerja dengan melakukan 3 tahapan penting, yaitu ekstraksi, transformasi, dan penyimpanan. Ekstraksi data dari repositori publik dilakukan dengan cara web scraping halaman situs. Proses ini dilakukan dengan bantuan SeleniumWebDriver sebagai alat utama dalam pengembangan ini. Berikutnya, transformasi data dilakukan dengan melakukan format terhadap pasangan key-value metadata yang diekstraksi dan memvalidasi hasilnya dengan model yang disediakan oleh lexin. Terakhir, penyimpanan data dilakukan pada Elasticsearch dan Google Cloud Storage. Pengembangan ini menggunakan metodologi waterfall dengan requirements yang sudah disediakan oleh tim Lexin.Pengembangan ini juga menghasilkan template sehingga memudahkan pengembang selanjutnya untuk menambahkan repositori yang akan diproses. Evaluasi hasil pengembangan dilakukan dengan menghitung Code Reusability Ratio untuk mendapatkan pengaruh template dalam setiap projek dan acceptance testing yang dilakukan oleh tim pengembang Lexin.