Dokumen ini membahas tentang konsep dasar data warehouse, termasuk definisi, fitur, komponen, dan metadata. Secara ringkas:
Data warehouse digunakan untuk mengintegrasikan dan mentransformasi data dari berbagai sumber untuk keperluan analisis manajemen. Komponen utamanya meliputi sumber data, penyimpanan data, pengiriman informasi, dan metadata. Metadata berisi informasi tentang struktur dan isi data untuk memfasilitasi pengembangan dan penggunaan data warehouse.
2. Agenda
1. Review Definisi Data warehouse
2. Feature Data warehouse
3. Data warehouse Vs Data Mart
4. Komponen/Building Block Data warehouse
5. Pengenalan Metadata
4. Review Definisi
Data warehouse :
Information Delivery System
• Mengintegrasikan, transformasi data-data corporate kedalam format
informasi yang tepat untuk kebutuhan pembuatan keputusan strategis
• Caranya :
Mengambil semua data histori persh dari semua sistem OLTP (data internal)
Mengkombinasikan data internal dan data external persh yang relevan.
Menghilangkan conflik akibat perbedaan format data,perbedaan system, description,
encoding, unit kemudian mentransformasikannya kedalam format yang baku
7. Sebelum membahas building block lebih jauh kita review
definisi Datawarehouse terlebih dahulu
Bill Inmon :
“A Data Warehouse is a subject
oriented, integrated, nonvolatile,
and time variant collection of data
in support of management’s
decisions.”
8. Sean Kelly :
The data in the data warehouse is:
Separate
Available
Integrated
Time stamped
Subject oriented
Nonvolatile
Accessible
9. Subject-Oriented Data
• OLTP
• Data set disimpan pada sebuah aplikasi individu
• Menyediakan data untuk semua fungsi organisasi (entering order, checking
stock, verifying custumer’s credit dll)
• Individual data mendukung individual aplikasi
10. Subject-Oriented Data
• Pada datawarehouse data disimpan berdasarkan subjek (business
subjek), bukan berdasarkan aplikasi
• Manufaktur sales, pengiriman, inventori adalah critical business
subjects.
13. Integrated Data
Data perlu distandarkan :
Sales Inventori Transaksi Penjualan
Format Key
Text
Key
Integer
Key
Yes/No
Description Nama pelanggan
U.N.I.J.O.Y.O
Nama pelanggan
UNIJOYO
Nama pelanggan
Universitas Trunojoyo
Unit Tinggi
centimeter
Tinggi
meter
Tinggi
inch
Encoding Sex
Yes = Laki-laki
No = Perempuan
Sex
L = laki-laki
P = Perempuan
Sex
1 = Laki-laki
0 = Perempuan
14. Time-Variant Data
Operasional :
• Data pada saat ini (current value)
Datawarehouse :
• Analisa data pada masa lampau
• Informasi pada saat ini
• Forecast untuk masa yang akan datang
15. Nonvolatile Data
Operasional :
Add, change, delete data pada sistem operasional secara real time
setiap transaksi terjadi
Datawarehouse
Update ketika kita perlukan saja, bisa secara periodik
Data pada DW dikuhusukan untuk query
dan analisa data
19. Data warehouse Vs Data mart
Data Mart adl bagian/subset dari data warehouse yang
sederhana (bag. Unit2 terkecil), lebih cepat bekerja
20. Metode untuk membangun DW
• Top Down, overall data warehouse feeding dependent data marts
• Bottom Up, several departmental or local data marts combining into
a data warehouse.
23. Komponen/Building Block Data warehouse
Source data :
Production Data data operasional persh.
Internal Data spreadsheets, dokumen, Profil
pelanggan, dan database departemen persh.
Archived Data data operasional yang telah
disimpan
External Data data statistik, penelitian dari
agenci luar, market share competitor,
indikator financial standar, dll
24. Komponen/Building Block Data warehouse
Data staging component : dari berbagai SO + eksternal data disimpan
pd DW yg hrs dirubah/disamakan formatnya shg dpt disimpan u/
query & analisa
ada 3 komponen :
1. Ekstraksi data
2. Transformasi data,
3. Loading data (ETL)
25. Komponen/Building Block Data warehouse
Data Storage Component
Repository data warehouse terpisah dengan repositori sistem
operasional
Sistem Operasional
mendukung “day-to-day operation” (OLTP)
Data warehouse
data histori yang besar untuk kebutuhan analisa data.
28. Komponen/Building Block Data warehouse
Siapa yang membutuhkan data ?
Novice User
Casual User
Business Analyst
Power User
29. Komponen/Building Block Data warehouse
KOMPONEN METADATA
Metadata dalam Data WareHouse
=
Kamus Data/ Data Katalog dalam DBMS (Database Management
System)
30. Komponen/Building Block Data warehouse
• Meta data
• Informasi tentang logical struktur data
• Informasi file dan alamatnya
• Informasi index
• Dll
Intinya
• Meta data = data mengenai data pada data warehouse
31. Komponen/Building Block Data warehouse
KOMPONEN MANAJEMEN DAN KONTROL
Komponen ini mengkoordinir servis dan aktivitas dalam data
warehouse.
Komponen ini berhubungan dengan komponen metadata untuk
melakukan fungsi kontrol
Metadata adalah sumber informasi bagi modul manajemen
34. Pengenalan Metadata
OPERASI METADATA
Terdiri dari semua informasi tentang data sumber
Proses:
Pilih data dari sistem sumber untuk data warehouse, pisah recordnya,
gabungkan bagian record dengan file sumber lainnya, dan berhasil
dengan skema multiple coding dan panjang field
35. Pengenalan Metadata
EXTRAKSI DAN INFORMASI METADATA
Terdiri dari data dari data extraksi data dari sistem sumber, yaitu:
Extraction frequencies
Extraction method
Business rules untuk data extraction
37. Pengenalan Metadata
FUNGSI METADATA
Menggabungkan semua bagian pada data warehouse
Menyediakan informasi tentang isi dan struktur pada pengembang
Membuka pintu bagi end - user dan membuat isi yang dapat dikenal
oleh mereka.
