Library Automation and Digital Archive
LONTAR
Fakultas Ilmu Komputer
Universitas Indonesia

Pencarian Sederhana

Find Similar Add to Favorite

Call Number SK-2565 (Softcopy SK-2047) Source Code-895
Collection Type Skripsi
Title Membangun Sistem Data Acquisition Pipeline Peraturan di Indonesia untuk Aplikasi Lexin
Author Nico Fathi Rizqi;
Publisher Depok: Fasilkom UI, 2025
Subject Web Scraping, Data Acquisition Pipeline
Location FASILKOM-UI;
Lokasi : Perpustakaan Fakultas Ilmu Komputer
Nomor Panggil ID Koleksi Status
SK-2565 (Softcopy SK-2047) Source Code-895 TERSEDIA
Tidak ada review pada koleksi ini: 56132
ABSTRAK

Nama : Nico Fathi Rizqi Program Studi : Ilmu Komputer Judul : Membangun Sistem Data Acquisition Pipeline Peraturan di Indonesia Untuk Aplikasi Lexin Pembimbing : Adila Alfa Krisnadhi, S.Kom., M.Sc., Ph.D Aplikasi Lexin memerlukan data kumpulan undang-undang yang disediakan pada laman publik. Untuk itu diperlukan suatu program untuk mendapatkan data peraturan perundangundangan di Indonesia untuk disimpan pada basis data yang disediakan. Pengembangan ini bertujuan untuk membangun sistem DAP yang memenuhi kebutuhan tersebut. Sistem bekerja dengan melakukan 3 tahapan penting, yaitu ekstraksi, transformasi, dan penyimpanan. Ekstraksi data dari repositori publik dilakukan dengan cara web scraping halaman situs. Proses ini dilakukan dengan bantuan SeleniumWebDriver sebagai alat utama dalam pengembangan ini. Berikutnya, transformasi data dilakukan dengan melakukan format terhadap pasangan key-value metadata yang diekstraksi dan memvalidasi hasilnya dengan model yang disediakan oleh lexin. Terakhir, penyimpanan data dilakukan pada Elasticsearch dan Google Cloud Storage. Pengembangan ini menggunakan metodologi waterfall dengan requirements yang sudah disediakan oleh tim Lexin.Pengembangan ini juga menghasilkan template sehingga memudahkan pengembang selanjutnya untuk menambahkan repositori yang akan diproses. Evaluasi hasil pengembangan dilakukan dengan menghitung Code Reusability Ratio untuk mendapatkan pengaruh template dalam setiap projek dan acceptance testing yang dilakukan oleh tim pengembang Lexin.