komponen-data warehouse.ppt
description
Transcript of komponen-data warehouse.ppt
1.1. Review Definisi Data warehouseReview Definisi Data warehouse
2.2. Feature Data warehouseFeature Data warehouse
3.3. Data warehouse Vs Data MartData warehouse Vs Data Mart
4.4. Komponen/Building Block Data Komponen/Building Block Data warehousewarehouse
5.5. Pengenalan MetadataPengenalan Metadata
PendahuluanPendahuluan
Data warehouse :Data warehouse :
Information Delivery System Information Delivery System Mengintegrasikan, transformasi data-data Mengintegrasikan, transformasi data-data
corporate kedalam format informasi yang tepat corporate kedalam format informasi yang tepat untuk kebutuhan pembuatan keputusan strategisuntuk kebutuhan pembuatan keputusan strategis
Caranya :Caranya : Mengambil semua data histori persh dari semua sistem Mengambil semua data histori persh dari semua sistem
OLTP (data internal)OLTP (data internal) Mengkombinasikan data internal dan data external Mengkombinasikan data internal dan data external
persh yang relevan.persh yang relevan. Menghilangkan conflik akibat perbedaan format Menghilangkan conflik akibat perbedaan format
data,perbedaan system, description, encoding, unit data,perbedaan system, description, encoding, unit kemudian mentransformasikannya kedalam format kemudian mentransformasikannya kedalam format yang baku oleh karena itu butuh komponen/building yang baku oleh karena itu butuh komponen/building blokblok
DefinisiDefinisi
Sebelum membahas building block lebih Sebelum membahas building block lebih jauh kita review definisi Datawarehouse jauh kita review definisi Datawarehouse terlebih dahuluterlebih dahulu
Bill Inmon :Bill Inmon :
““A Data Warehouse is a subject A Data Warehouse is a subject oriented, integrated, oriented, integrated, nonvolatile, and time variant nonvolatile, and time variant collection of data in support collection of data in support of management’s decisions.”of management’s decisions.”
Sean Kelly :Sean Kelly :
The data in the data warehouse is:The data in the data warehouse is: SeparateSeparate AvailableAvailable IntegratedIntegrated Time stampedTime stamped Subject orientedSubject oriented NonvolatileNonvolatile AccessibleAccessible
OLTPOLTP Data set disimpan pada sebuah aplikasi Data set disimpan pada sebuah aplikasi
individuindividu Menyediakan data untuk semua fungsi Menyediakan data untuk semua fungsi
organisasi (entering order, checking stock, organisasi (entering order, checking stock, verifying custumer’s credit dll)verifying custumer’s credit dll)
Individual data mendukung individual Individual data mendukung individual aplikasiaplikasi
Subject-Subject-Oriented Oriented DataData
Pada Pada datawarehousedatawarehouse data disimpan data disimpan berdasarkan berdasarkan subjek (business subjek)subjek (business subjek), , bukan berdasarkan aplikasibukan berdasarkan aplikasi
Manufaktur Manufaktur sales, pengiriman, sales, pengiriman, inventori adalah inventori adalah critical business critical business subjects.subjects.
Subject-Oriented Subject-Oriented DataData
Data perlu distandarkan : Data perlu distandarkan :
Integrated DataIntegrated Data
Sales Inventori Transaksi Penjualan
Format KeyText
KeyInteger
KeyYes/No
Description Nama pelangganU.N.I.J.O.Y.O
Nama pelangganUNIJOYO
Nama pelangganUniversitas Trunojoyo
Unit Tinggicentimeter
Tinggimeter
Tinggiinch
Encoding SexYes = Laki-lakiNo = Perempuan
SexL = laki-lakiP = Perempuan
Sex1 = Laki-laki0 = Perempuan
Operasional : Operasional : Data pada saat ini (current value)Data pada saat ini (current value)
Datawarehouse :Datawarehouse : Analisa data pada masa lampauAnalisa data pada masa lampau Informasi pada saat iniInformasi pada saat ini Forecast untuk masa yang akan datangForecast untuk masa yang akan datang
Time-Variant DataTime-Variant Data
Operasional :Operasional : Add, change, delete data pada sistem Add, change, delete data pada sistem
operasional secara real time setiap transaksi operasional secara real time setiap transaksi terjaditerjadi
DatawarehouseDatawarehouse Update ketika kita perlukan saja, bisa secara Update ketika kita perlukan saja, bisa secara
periodikperiodik
Data pada DW dikuhusukan Data pada DW dikuhusukan untuk query dan analisa datauntuk query dan analisa data
Nonvolatile DataNonvolatile Data
Data warehouse Vs Data Data warehouse Vs Data martmartData Mart adl bagian/subset dari data
warehouse yang sederhana (bag. Unit2 terkecil), lebih cepat bekerja
Top Down, overall data warehouse Top Down, overall data warehouse feeding dependent data martsfeeding dependent data marts
Bottom Up, several departmental or local Bottom Up, several departmental or local data marts combining into a data data marts combining into a data warehouse.warehouse.
Metode untuk Metode untuk membangun DWmembangun DW
Source data :Source data :
Production Data Production Data data operasional data operasional pershpersh..
Internal Data Internal Data spreadsheets, dokumen, spreadsheets, dokumen, Profil pelanggan, dan database Profil pelanggan, dan database departemen persh.departemen persh.
Archived Data Archived Data data operasional yang data operasional yang telah disimpantelah disimpan
External Data External Data data statistik, data statistik, penelitian dari agenci luar, market penelitian dari agenci luar, market share competitor, indikator financial share competitor, indikator financial standar, dllstandar, dll
Komponen/Building Komponen/Building Block Data warehouseBlock Data warehouse
Data staging component Data staging component : dari berbagai : dari berbagai SO + eksternal data disimpan pd DW yg SO + eksternal data disimpan pd DW yg hrs dirubah/disamakan formatnya shg hrs dirubah/disamakan formatnya shg dpt disimpan u/ query & analisadpt disimpan u/ query & analisa
ada 3 komponen : ada 3 komponen : 1.1. Ekstraksi dataEkstraksi data2.2. Transformasi data,Transformasi data,3.3. Loading data (ETL)Loading data (ETL)
Komponen/Building Komponen/Building Block Data warehouseBlock Data warehouse
Data Storage ComponentData Storage Component
Repository data warehouse terpisah Repository data warehouse terpisah dengan repositori sistem operasionaldengan repositori sistem operasional
Sistem OperasionalSistem Operasionalmendukung “day-to-day operation” mendukung “day-to-day operation” (OLTP)(OLTP)
Data warehouseData warehousedata histori yang besar untuk data histori yang besar untuk kebutuhan analisa data.kebutuhan analisa data.
Komponen/Building Komponen/Building Block Data warehouseBlock Data warehouse
Siapa yang membutuhkan data ?Siapa yang membutuhkan data ? Novice UserNovice User Casual UserCasual User Business AnalystBusiness Analyst Power UserPower User
Komponen/Building Komponen/Building Block Data warehouseBlock Data warehouse
KOMPONEN METADATAKOMPONEN METADATA
MetadataMetadata dalam dalam Data WareHouseData WareHouse
==
Kamus Data/ Data Katalog Kamus Data/ Data Katalog dalamdalam DBMSDBMS (Database Management System)(Database Management System)
Komponen/Building Komponen/Building Block Data warehouseBlock Data warehouse
Meta dataMeta data Informasi tentang logical struktur dataInformasi tentang logical struktur data Informasi file dan alamatnyaInformasi file dan alamatnya Informasi indexInformasi index DllDll
Intinya Intinya Meta data = data mengenai data pada Meta data = data mengenai data pada
data warehousedata warehouse
Komponen/Building Komponen/Building Block Data warehouseBlock Data warehouse
KOMPONEN MANAJEMEN DAN KOMPONEN MANAJEMEN DAN KONTROLKONTROL
Komponen ini mengkoordinir servis dan Komponen ini mengkoordinir servis dan aktivitas dalam data warehouse.aktivitas dalam data warehouse.
Komponen ini berhubungan dengan Komponen ini berhubungan dengan komponen metadata untuk melakukan komponen metadata untuk melakukan fungsi kontrolfungsi kontrol
Metadata adalah sumber informasi bagi Metadata adalah sumber informasi bagi modul manajemenmodul manajemen
Komponen/Building Komponen/Building Block Data warehouseBlock Data warehouse
TIPE-TIPE TIPE-TIPE METADATAMETADATA
OPERASI METADATAOPERASI METADATA EKSTRAKSI DAN TRANSFORMASI EKSTRAKSI DAN TRANSFORMASI
METADATAMETADATA END – USER METADATAEND – USER METADATA
Pengenalan MetadataPengenalan Metadata
OPERASI METADATAOPERASI METADATA
Terdiri dari semua informasi tentang Terdiri dari semua informasi tentang data sumberdata sumber
Proses:Proses:
Pilih data dari sistem sumber untuk data Pilih data dari sistem sumber untuk data warehouse, pisah recordnya, gabungkan warehouse, pisah recordnya, gabungkan bagian record dengan file sumber bagian record dengan file sumber lainnya, dan berhasil dengan skema lainnya, dan berhasil dengan skema multiple coding dan panjang fieldmultiple coding dan panjang field
Pengenalan MetadataPengenalan Metadata
EXTRAKSI DAN INFORMASI METADATAEXTRAKSI DAN INFORMASI METADATATerdiri dari data dari data extraksi data Terdiri dari data dari data extraksi data dari sistem sumber, yaitu:dari sistem sumber, yaitu: Extraction frequenciesExtraction frequencies Extraction methodExtraction method Business rules untuk data extractionBusiness rules untuk data extraction
Pengenalan MetadataPengenalan Metadata
END-USER METADATAEND-USER METADATA
AdalahAdalah Peta NavigasiPeta Navigasi padapada data warehousedata warehouse
Pengenalan MetadataPengenalan Metadata
FUNGSI METADATAFUNGSI METADATA Menggabungkan semua bagian pada Menggabungkan semua bagian pada
data warehousedata warehouse Menyediakan informasi tentang isi dan Menyediakan informasi tentang isi dan
struktur pada pengembangstruktur pada pengembang Membuka pintu bagi end - user dan Membuka pintu bagi end - user dan
membuat isi yang dapat dikenal oleh membuat isi yang dapat dikenal oleh mereka.mereka.
Pengenalan MetadataPengenalan Metadata