Winnetou, Arif Bimo (2017) Analisis Peningkatan Performa Proses ETL (Extract, Transform, Dan Loading) Pada Data Warehouse Dengan Menerapkan Delta Extraction Menggunakan Historical Table. Sarjana thesis, Universitas Brawijaya.
Abstract
Dalam jangka waktu tertentu, umuninyd instansi pendidikan menghasilkan data dengan kapasitas yang sangdt besdr dad kegiatan operasionalnya. Dari data tersebut akan muncul kebutulidn untuk mendapatkan informasi tertentu yang berguna sebagai bahan evaluasi kinerja atau bahkan sebagai bahan untuk mengambil keputusan manajemen kedepannya. Data warehouse merupakan salah satu solusi dari kebutuhan tersebut. Dengan bertambahnya kapasitas dan kompleksitas suatu data warehouse yang dimiliki maka teknik full extract dalam proses Extract Transform Loading (ETL) menjadi tidak memadai bahkan pada kasus tertentu proses ini tidak bisa diaplikasikan, salah satunya dikarenakan teknik ini menyebabkan cost yang besar. Delta extraction dapat menjadi salah satu solusi dari permasalahan tersebut dikarenakan prosesnya yang hanya meng-extract data yang mengalami perubahan saja pada proses ETL. Teknik delta extraction ini akan diuji coba pada DBMS MySQL dengan menggunakan historical table dan trigger. Dari hasil uji coba beban didapatkan kesimpulan bahwa trigger memberikan beban terhadap tabel parent-nya, namun waktu tunggu yang dibutuhkan dari waktu eksekusi query-nya masih dapat ditoleransi. Sedangkan dari hasil uji coba perbandingan kecepatan eksekusi proses ETL didapatkan kesimpulan bahwa teknik delta extraction dapat meningkatkan kecepatan eksekusi proses ETL atau dengan kata lain waktu eksekusi proses ETL dengan teknik delta extraction lebih cepat dibandingkan dengan teknik full extract.
English Abstract
In a certain period of time, most educational institutions produce data with a huge capacity from their operational activities. From those data will appear the need to obtain certain information which is useful as a material of performance evaluation or even as a material of management decision. Data warehouse is one of solutions of these needs. When the capacity and complexity of data warehouse has been increasing, then full extract technique in Extract Transform Loading (ETL) process becomes inadequate, even in others case this technique can not be applied, because this technique causes a large cost. Delta extraction can be one of the solutions of this problem because the process is to extract only the data which has been changing in ETL process. Delta extraction technique will be tested on MySQL DBMS using historical table and trigger. From the result of load test, it can be concluded that trigger gives the load to its parent table, but the waiting time that is required is still tolerable. Meanwhile, from the result of comparison test of ETL process execution speed, it can be concluded that delta extraction technique can increase the execution speed of ETL, or in the other words, execution time of ETL process with delta extraction technique is faster than full extract technique.
| Item Type: | Thesis (Sarjana) |
|---|---|
| Identification Number: | SKR/FTIK/2017/551/051707872 |
| Uncontrolled Keywords: | Data, Data warehouse, ETL, Cost, Delta Extraction |
| Subjects: | 000 Computer science, information and general works > 004 Computer science > 004.5 Storage |
| Divisions: | Fakultas Ilmu Komputer > Sistem Informasi |
| Depositing User: | Yusuf Dwi N. |
| Date Deposited: | 29 Aug 2017 07:22 |
| Last Modified: | 01 Oct 2020 04:23 |
| URI: | http://repository.ub.ac.id/id/eprint/1861 |
Preview |
Text
ARIF BIMO WINNETOU.pdf Download (6MB) | Preview |
Actions (login required)
 |
View Item |