komponen-data warehouse.ppt

32
{ { DATA WAREHOUSE DATA WAREHOUSE ( ( The Building Blocks The Building Blocks ) )

description

A Data Warehouse is a subject oriented, integrated, nonvolatile, and time variant collection of data in support of management’s decisions

Transcript of komponen-data warehouse.ppt

{{

DATA WAREHOUSEDATA WAREHOUSE((The Building BlocksThe Building Blocks))

1.1. Review Definisi Data warehouseReview Definisi Data warehouse

2.2. Feature Data warehouseFeature Data warehouse

3.3. Data warehouse Vs Data MartData warehouse Vs Data Mart

4.4. Komponen/Building Block Data Komponen/Building Block Data warehousewarehouse

5.5. Pengenalan MetadataPengenalan Metadata

PendahuluanPendahuluan

Data warehouse :Data warehouse :

Information Delivery System Information Delivery System Mengintegrasikan, transformasi data-data Mengintegrasikan, transformasi data-data

corporate kedalam format informasi yang tepat corporate kedalam format informasi yang tepat untuk kebutuhan pembuatan keputusan strategisuntuk kebutuhan pembuatan keputusan strategis

Caranya :Caranya : Mengambil semua data histori persh dari semua sistem Mengambil semua data histori persh dari semua sistem

OLTP (data internal)OLTP (data internal) Mengkombinasikan data internal dan data external Mengkombinasikan data internal dan data external

persh yang relevan.persh yang relevan. Menghilangkan conflik akibat perbedaan format Menghilangkan conflik akibat perbedaan format

data,perbedaan system, description, encoding, unit data,perbedaan system, description, encoding, unit kemudian mentransformasikannya kedalam format kemudian mentransformasikannya kedalam format yang baku oleh karena itu butuh komponen/building yang baku oleh karena itu butuh komponen/building blokblok

DefinisiDefinisi

Sebelum membahas building block lebih Sebelum membahas building block lebih jauh kita review definisi Datawarehouse jauh kita review definisi Datawarehouse terlebih dahuluterlebih dahulu

Bill Inmon :Bill Inmon :

““A Data Warehouse is a subject A Data Warehouse is a subject oriented, integrated, oriented, integrated, nonvolatile, and time variant nonvolatile, and time variant collection of data in support collection of data in support of management’s decisions.”of management’s decisions.”

Sean Kelly :Sean Kelly :

The data in the data warehouse is:The data in the data warehouse is: SeparateSeparate AvailableAvailable IntegratedIntegrated Time stampedTime stamped Subject orientedSubject oriented NonvolatileNonvolatile AccessibleAccessible

OLTPOLTP Data set disimpan pada sebuah aplikasi Data set disimpan pada sebuah aplikasi

individuindividu Menyediakan data untuk semua fungsi Menyediakan data untuk semua fungsi

organisasi (entering order, checking stock, organisasi (entering order, checking stock, verifying custumer’s credit dll)verifying custumer’s credit dll)

Individual data mendukung individual Individual data mendukung individual aplikasiaplikasi

Subject-Subject-Oriented Oriented DataData

Pada Pada datawarehousedatawarehouse data disimpan data disimpan berdasarkan berdasarkan subjek (business subjek)subjek (business subjek), , bukan berdasarkan aplikasibukan berdasarkan aplikasi

Manufaktur Manufaktur sales, pengiriman, sales, pengiriman, inventori adalah inventori adalah critical business critical business subjects.subjects.

Subject-Oriented Subject-Oriented DataData

SubjekSubjek AplikasiAplikasi

Subject-Oriented Subject-Oriented DataData

Integrated DataIntegrated Data

Data perlu distandarkan : Data perlu distandarkan :

Integrated DataIntegrated Data

Sales Inventori Transaksi Penjualan

Format KeyText

KeyInteger

KeyYes/No

Description Nama pelangganU.N.I.J.O.Y.O

Nama pelangganUNIJOYO

Nama pelangganUniversitas Trunojoyo

Unit Tinggicentimeter

Tinggimeter

Tinggiinch

Encoding SexYes = Laki-lakiNo = Perempuan

SexL = laki-lakiP = Perempuan

Sex1 = Laki-laki0 = Perempuan

Operasional : Operasional : Data pada saat ini (current value)Data pada saat ini (current value)

Datawarehouse :Datawarehouse : Analisa data pada masa lampauAnalisa data pada masa lampau Informasi pada saat iniInformasi pada saat ini Forecast untuk masa yang akan datangForecast untuk masa yang akan datang

Time-Variant DataTime-Variant Data

Operasional :Operasional : Add, change, delete data pada sistem Add, change, delete data pada sistem

operasional secara real time setiap transaksi operasional secara real time setiap transaksi terjaditerjadi

DatawarehouseDatawarehouse Update ketika kita perlukan saja, bisa secara Update ketika kita perlukan saja, bisa secara

periodikperiodik

Data pada DW dikuhusukan Data pada DW dikuhusukan untuk query dan analisa datauntuk query dan analisa data

Nonvolatile DataNonvolatile Data

Nonvolatile DataNonvolatile Data

Data GranularityData Granularity

Data warehouse Vs Data Data warehouse Vs Data martmartData Mart adl bagian/subset dari data

warehouse yang sederhana (bag. Unit2 terkecil), lebih cepat bekerja

Top Down, overall data warehouse Top Down, overall data warehouse feeding dependent data martsfeeding dependent data marts

Bottom Up, several departmental or local Bottom Up, several departmental or local data marts combining into a data data marts combining into a data warehouse.warehouse.

Metode untuk Metode untuk membangun DWmembangun DW

Komponen/Building Komponen/Building Block Data warehouseBlock Data warehouse

Source data :Source data :

Production Data Production Data data operasional data operasional pershpersh..

Internal Data Internal Data spreadsheets, dokumen, spreadsheets, dokumen, Profil pelanggan, dan database Profil pelanggan, dan database departemen persh.departemen persh.

Archived Data Archived Data data operasional yang data operasional yang telah disimpantelah disimpan

External Data External Data data statistik, data statistik, penelitian dari agenci luar, market penelitian dari agenci luar, market share competitor, indikator financial share competitor, indikator financial standar, dllstandar, dll

Komponen/Building Komponen/Building Block Data warehouseBlock Data warehouse

Data staging component Data staging component : dari berbagai : dari berbagai SO + eksternal data disimpan pd DW yg SO + eksternal data disimpan pd DW yg hrs dirubah/disamakan formatnya shg hrs dirubah/disamakan formatnya shg dpt disimpan u/ query & analisadpt disimpan u/ query & analisa

ada 3 komponen : ada 3 komponen : 1.1. Ekstraksi dataEkstraksi data2.2. Transformasi data,Transformasi data,3.3. Loading data (ETL)Loading data (ETL)

Komponen/Building Komponen/Building Block Data warehouseBlock Data warehouse

Data Storage ComponentData Storage Component

Repository data warehouse terpisah Repository data warehouse terpisah dengan repositori sistem operasionaldengan repositori sistem operasional

Sistem OperasionalSistem Operasionalmendukung “day-to-day operation” mendukung “day-to-day operation” (OLTP)(OLTP)

Data warehouseData warehousedata histori yang besar untuk data histori yang besar untuk kebutuhan analisa data.kebutuhan analisa data.

Komponen/Building Komponen/Building Block Data warehouseBlock Data warehouse

Komponen/Building Komponen/Building Block Data warehouseBlock Data warehouse

Komponen/Building Komponen/Building Block Data warehouseBlock Data warehouse

Information Delivery

Siapa yang membutuhkan data ?Siapa yang membutuhkan data ? Novice UserNovice User Casual UserCasual User Business AnalystBusiness Analyst Power UserPower User

Komponen/Building Komponen/Building Block Data warehouseBlock Data warehouse

KOMPONEN METADATAKOMPONEN METADATA

MetadataMetadata dalam dalam Data WareHouseData WareHouse

==

Kamus Data/ Data Katalog Kamus Data/ Data Katalog dalamdalam DBMSDBMS (Database Management System)(Database Management System)

Komponen/Building Komponen/Building Block Data warehouseBlock Data warehouse

Meta dataMeta data Informasi tentang logical struktur dataInformasi tentang logical struktur data Informasi file dan alamatnyaInformasi file dan alamatnya Informasi indexInformasi index DllDll

Intinya Intinya Meta data = data mengenai data pada Meta data = data mengenai data pada

data warehousedata warehouse

Komponen/Building Komponen/Building Block Data warehouseBlock Data warehouse

KOMPONEN MANAJEMEN DAN KOMPONEN MANAJEMEN DAN KONTROLKONTROL

Komponen ini mengkoordinir servis dan Komponen ini mengkoordinir servis dan aktivitas dalam data warehouse.aktivitas dalam data warehouse.

Komponen ini berhubungan dengan Komponen ini berhubungan dengan komponen metadata untuk melakukan komponen metadata untuk melakukan fungsi kontrolfungsi kontrol

Metadata adalah sumber informasi bagi Metadata adalah sumber informasi bagi modul manajemenmodul manajemen

Komponen/Building Komponen/Building Block Data warehouseBlock Data warehouse

TIPE-TIPE TIPE-TIPE METADATAMETADATA

OPERASI METADATAOPERASI METADATA EKSTRAKSI DAN TRANSFORMASI EKSTRAKSI DAN TRANSFORMASI

METADATAMETADATA END – USER METADATAEND – USER METADATA

Pengenalan MetadataPengenalan Metadata

OPERASI METADATAOPERASI METADATA

Terdiri dari semua informasi tentang Terdiri dari semua informasi tentang data sumberdata sumber

Proses:Proses:

Pilih data dari sistem sumber untuk data Pilih data dari sistem sumber untuk data warehouse, pisah recordnya, gabungkan warehouse, pisah recordnya, gabungkan bagian record dengan file sumber bagian record dengan file sumber lainnya, dan berhasil dengan skema lainnya, dan berhasil dengan skema multiple coding dan panjang fieldmultiple coding dan panjang field

Pengenalan MetadataPengenalan Metadata

EXTRAKSI DAN INFORMASI METADATAEXTRAKSI DAN INFORMASI METADATATerdiri dari data dari data extraksi data Terdiri dari data dari data extraksi data dari sistem sumber, yaitu:dari sistem sumber, yaitu: Extraction frequenciesExtraction frequencies Extraction methodExtraction method Business rules untuk data extractionBusiness rules untuk data extraction

Pengenalan MetadataPengenalan Metadata

END-USER METADATAEND-USER METADATA

AdalahAdalah Peta NavigasiPeta Navigasi padapada data warehousedata warehouse

Pengenalan MetadataPengenalan Metadata

FUNGSI METADATAFUNGSI METADATA Menggabungkan semua bagian pada Menggabungkan semua bagian pada

data warehousedata warehouse Menyediakan informasi tentang isi dan Menyediakan informasi tentang isi dan

struktur pada pengembangstruktur pada pengembang Membuka pintu bagi end - user dan Membuka pintu bagi end - user dan

membuat isi yang dapat dikenal oleh membuat isi yang dapat dikenal oleh mereka.mereka.

Pengenalan MetadataPengenalan Metadata

Sekian Terima KasihSekian Terima Kasih

Data Warehousing Fundamentals: A Comprehensive Guide for IT Professionals. Paulraj PonniahCopyright © 2001 John Wiley & Sons, Inc.