Dr.Bambang P.D.P, S.E., S.Kom., MMSI Contributor Mnsen, Heman Koreri Israel - 21/2006/0056/TSD/13 Primary Author mixed material bibliography Yogyakarta UNIVERSITAS TEKNOLOGI DIGITAL INDONESIA (UTDI) 2024 monographic id Indonesia

Thesis

Dalam membangun sebuah sistem informasi yang terintegrasi, perencanaan arsitektur adalah langkah awal yang harus dilakukan. Perencanaan pengembangan sebuah sistem informasi sangat diperlukan agar sistem yang dikembangkan dapat berjalan sesuai dengan kebutuhan. Data yang digunakan pada penelitian ini yaitu data internal kampus Akademi Teknik Biak dan data eksternal dari Lembaga Layanan Pendidikan Tinggi Wilayah XIV. Adapun tujuan dari penelitian ini adalah merancang arsitektur data pipeline sistem informasi Akademi Teknik Biak. Arsitektur pipeline digunakan untuk membawa sumber daya yang besar dari satu lokasi ke lokasi lain yang jaraknya berjauhan dengan lebih efisien. Metode yang digunakan pada penelitian ini adalah proses extract-transform-load (ETL). Untuk proses extract data sendiri dibutuhkan library pendukung pada apache spark dengan menggunakan library SparkSession. SparkSession ini dilakukan agar pemanggilan data Akademi Teknik Biak dengan ekstensi csv dapat dijalankan pada apache spark. Setelah proses extract dilakukan, apache spark akan membaca data dengan ekstensi.csv dan melakukan proses transform data. Dari proses transform data ekstensi.csv ini akan di load ke dalam sebuah Dataframe sebagai output dari proses ETL. Hasil penelitian yang diperoleh adalah teknologi apache spark dapat mempermudah penulis dalam proses perancangan sistem informasi Akademi Teknik Biak dan menjadi salah satu solusi yang tepat dalam proses Extract Load Transform (ETL) data dengan skala yang besar dan real-time. Kata Kunci: Apache Spark, Arsitektur Pipeline, ETL, Sistem Informasi, DataFrame. PIPELINE DATA SISTEM INFORMASI AKADEMIK Arsitektur NONE Perpustakaan Universitas Teknologi Digital Indonesia Katalog Online Perpustakaan Universitas Teknologi Digital Indonesia 008 MNS A R.1 MSN0008MTI0124 RAK REFERENSI TESIS MTI 008 MNS A R.1 17295 2024-03-28 11:22:04 2024-03-28 11:29:56 machine generated