ABSTRAK ABSTRAK
Nama : Rahmania Astrid Mochtar
NPM : 1606828702
Program Studi : Ilmu Komputer
Judul Kerja Praktik : Pembuatan Pipeline Metadata Pada Seluruh Sumber Data di
Tokopedia
Laporan ini menjelaskan proses penulis dalam menjalankan kerja praktik di PT.
Tokopedia selama sepuluh minggu sebagai seorang data engineer intern. Selama
periode kerja praktik berlangsung, penulis diberikan tanggung jawab untuk
menyelesaikan sebuah proyek baru dari awal sampai dengan dua fase. Proyek tersebut
adalah membuat pipeline yang menghubungkan metadata dari data warehouse utama
Tokopedia ke platform data discovery baru. Dalam mengerjakan proyek tersebut,
penulis mempelajari dan menggunakan beberapa teknologi yang sebelumnya belum
pernah digunakan. Contoh teknologi yang disebut adalah data discovery tool, yakni
Google Cloud Data Catalog dan Apache Atlas. Proyek yang dikerjakan oleh penulis
pun sekarang digunakan oleh para data analyst dan business intelligence untuk
melakukan analisis pada dataset yang ada pada Tokopedia.
Kata Kunci: Data Discovery, Data Engineering, Metadata, Pipeline.
|