Detail Cantuman Kembali
ARSITEKTUR DATA PIPELINE UNTUK SISTEM INFORMASI AKADEMIK DI AKADEMI TEKNIK BIAK
- Bagikan:
Dalam membangun sebuah sistem informasi yang terintegrasi, perencanaan
arsitektur adalah langkah awal yang harus dilakukan. Perencanaan pengembangan
sebuah sistem informasi sangat diperlukan agar sistem yang dikembangkan dapat
berjalan sesuai dengan kebutuhan. Data yang digunakan pada penelitian ini yaitu
data internal kampus Akademi Teknik Biak dan data eksternal dari Lembaga
Layanan Pendidikan Tinggi Wilayah XIV.
Adapun tujuan dari penelitian ini adalah merancang arsitektur data pipeline
sistem informasi Akademi Teknik Biak. Arsitektur pipeline digunakan untuk
membawa sumber daya yang besar dari satu lokasi ke lokasi lain yang jaraknya
berjauhan dengan lebih efisien. Metode yang digunakan pada penelitian ini adalah
proses extract-transform-load (ETL).
Untuk proses extract data sendiri dibutuhkan library pendukung pada apache
spark dengan menggunakan library SparkSession. SparkSession ini dilakukan
agar pemanggilan data Akademi Teknik Biak dengan ekstensi csv dapat
dijalankan pada apache spark. Setelah proses extract dilakukan, apache spark
akan membaca data dengan ekstensi.csv dan melakukan proses transform data.
Dari proses transform data ekstensi.csv ini akan di load ke dalam sebuah
Dataframe sebagai output dari proses ETL. Hasil penelitian yang diperoleh adalah
teknologi apache spark dapat mempermudah penulis dalam proses perancangan
sistem informasi Akademi Teknik Biak dan menjadi salah satu solusi yang tepat
dalam proses Extract Load Transform (ETL) data dengan skala yang besar dan
real-time.
Kata Kunci: Apache Spark, Arsitektur Pipeline, ETL, Sistem Informasi,
DataFrame.
Mnsen, Heman Koreri Israel - 21/2006/0056/TSD/13 - Personal Name
Dr.Bambang P.D.P, S.E., S.Kom., MMSI - Personal Name
Dr.Bambang P.D.P, S.E., S.Kom., MMSI - Personal Name
008 MNS A R.1
NONE
Thesis
Indonesia
UNIVERSITAS TEKNOLOGI DIGITAL INDONESIA (UTDI)
2024
Yogyakarta
LOADING LIST...
LOADING LIST...