Thiết kế Data Warehouse và ứng dụng trong hệ thống thông tin ngành điện

IăH CăQU CăGIAăHĨăN I
TR

NG

I H C CÔNG NGH

Ph m V n Vinh

THI T K DATA WAREHOUSE VÀ NG D NG
TRONG H TH NG THÔNG TIN NGÀNH I N

LU NăV NăTH CăS

HàăN iă- 2008


IăH CăQU CăGIAăHĨăN I
TR

NG

I H C CÔNG NGH

Ph m V n Vinh

THI T K DATA WAREHOUSE VÀ NG D NG
TRONG H TH NG THÔNG TIN NGÀNH I N

Ngành: Công Ngh ăthông Tin
Mưăs : 1.01.10

LU NăV NăTH CăS
NG

IăH

NGăD NăKHOAăH C

PGS.TS.ăHOĨNGăXUÂNăHU N

HàăN iă- 2008


L i cam đoan
V iăm căđíchăh căt p,ănghiênăc uăđ ănângăcaoăki năth căvàătrìnhăđ ăchuyênămônănênă
tôiăđưălàmălu năv nănàyăm tăcáchănghiêmătúcăvàăhoànătoànătrungăth c.
Trongălu năv n,ătôiăcóăs ăd ng m tăs ătàiăli uăthamăkh oăc aăm tăs ătácăgi .ăTôiăđưă
nêuăraătrongăph nătàiăli uăthamăkh oă ăcu iălu năv n.
Tôiăxinăcamăđoanăvàăch uătráchănhi măv ăn iădungăvàăs ătrungăth cătrongălu năv năt tă
nghi păTh căs c aămình!

H căviên,ăPh m V n Vinh.


L ic m n
Tr cătiên,ăemăxinăbàyă t ă l iăc mă năsâuă s cănh tăt iăth yăgiáoăh ngăd nă PGS.TS.
HoàngăXuânăHu nălàăng iăđưăt nătìnhăh ngăd n,ăch ăb o,ăgiúpăđ ăemăr tănhi uătrongă
quáătrìnhătìmăhi uănghiênăc uăđ ăhoànăthànhălu n v n t tănghi pănày.
Em xin chânăthànhăc mă năcácăth yăcôăgiáoă i h c CôngăNgh ă- iăh căQu căGiaă
Hàă N iă đưă d yă b o,ă trangă b ă choă emă nh ngă ki nă th că c ă b nă trong su t th i gian

nghiên c u và h c t p t i tr ng c a em.
Emă xină chână thànhă c mă nă cácă cô,ă cácă chú,ă cácă anh,ă cácă ch ă trongă Trung tâm công
ngh thông tin - i n l c Vi t Nam cùngătoànăth ăcácăb năbèăđưăt oăm iăđi uăki năvàă
đóngăgópănh ngăýăki năb ăíchătrongăth iăgianăemălàmălu n v n t t nghi p.


M CL C
DANH SÁCH HÌNH V ............................................................................................ 16
DÁNH SÁCH B NG BI U ....................................................................................... 17
B NG T VI T T T .................................................... Error! Bookmark not defined.
T KHOÁ ....................................................................... Error! Bookmark not defined.
M
U .......................................................................... Error! Bookmark not defined.
CH
NG 1: GI I THI U CHUNG V DATA WAREHOUSEError! Bookmark
not defined.
1.1.ăGi iăthi u ........................................................... Error! Bookmark not defined.
1.2.ăKháiăni măv ădataăwarehouse ............................ Error! Bookmark not defined.
1.3.ăL iăíchăs ăd ngădataăwarehouse ........................ Error! Bookmark not defined.
1.4.ăCácăthànhăph nătrongămôiătr
defined.

ngădataăwarehouseError!

Bookmark

not

1.4.1.ăKh iăcácăngu năd ăli u............................... Error! Bookmark not defined.
1.4.2.ăKh iăt oăd ngădataăwarehouse ................... Error! Bookmark not defined.

1.4.3.ăThànhăph năl uătr ăd ăli u ......................... Error! Bookmark not defined.
1.4.4.ăThànhăph năphânăphátăthôngătin ................. Error! Bookmark not defined.
1.4.5.ăThànhăph năsiêuăd ăli u ............................. Error! Bookmark not defined.
1.4.6.ăThànhăph năqu nălýăvàăki măsoát ............... Error! Bookmark not defined.
1.4.7.ăThànhăph nă ngăd ng ................................. Error! Bookmark not defined.
1.5.ăM tăs ăkháiăni măliênăquan ............................... Error! Bookmark not defined.
1.5.1.ăC ăs ăd ăli uăđaăchi u ................................ Error! Bookmark not defined.
1.5.2.ăKhoăd ăli uătácănghi p ............................... Error! Bookmark not defined.
1.5.3.ăKhoăd ăli uăh

ngăch ăđ .......................... Error! Bookmark not defined.

1.6.ăH ăth ngăx ălýăgiaoăd chătr cătuy năvàădataăwarehouseError! Bookmark not
defined.
CH

NG 2: KI N TRÚC DATA WAREHOUSE .... Error! Bookmark not defined.

2.1.ăKi nătrúcădataăwarehouse .................................. Error! Bookmark not defined.
2.2.ăCácămôăhìnhăc aădataăwarehouse ...................... Error! Bookmark not defined.
2.3.ăMôăhìnhăd ăli uăđaăchi u ................................... Error! Bookmark not defined.
2.3.1.ăL

căđ ăd ăli uătrongădataăwarehouse ....... Error! Bookmark not defined.

2.3.2.ă nhăngh aăl

căđ ..................................... Error! Bookmark not defined.

2.3.3.ă
CH

ăphânăc p ................................................ Error! Bookmark not defined.

NG 3: OLAP VÀ DATA WAREHOUSE ......... Error! Bookmark not defined.

3.1.ăGi iăthi uăv ăOLAP ........................................... Error! Bookmark not defined.
3.2.ă

cătr ngăc aăOLAP ......................................... Error! Bookmark not defined.

3.3.ăPhânătíchăđaăchi u .............................................. Error! Bookmark not defined.
3.4.ăCácătoánăt ătrongăOLAP .................................... Error! Bookmark not defined.
3.4.1.ăToánăt ăcu nălên ......................................... Error! Bookmark not defined.
3.4.2.ăToánăt ăkhoanăsâu ...................................... Error! Bookmark not defined.
3.4.3.ăToánăt ăc tălátăvàăthuănh ........................... Error! Bookmark not defined.
3.4.4.ăToánăt ăxoay ............................................... Error! Bookmark not defined.
3.4.5.ăM tăs ătoánăt ăkhác .................................... Error! Bookmark not defined.
3.5. Các mô hình trong OLAP .................................. Error! Bookmark not defined.
3.5.1. Mô hình MOLAP ....................................... Error! Bookmark not defined.
3.5.2. Mô hình ROLAP ........................................ Error! Bookmark not defined.
3.5.3.ăL aăch nămôăhìnhăROLAPăhayăMOLAP ... Error! Bookmark not defined.
3.5.4.ăCáchătri năkhaiăOLAP ................................ Error! Bookmark not defined.
CH
NG 4: THI T K V T LÝ DATA WAREHOUSEError!
defined.

Bookmark

not

4.1.ăCácăy uăt ăkhiăthi tăk ăv tălý ............................. Error! Bookmark not defined.
4.1.1.ăCácăđ iăt

ngăthi tăk ăv tălý ...................... Error! Bookmark not defined.

4.1.2.ăT ăthi tăk ălogicăt iăthi tăk ăv tălý ............. Error! Bookmark not defined.
4.1.3.ăCácăthànhăph năc aămôăhìnhăv tălý ............ Error! Bookmark not defined.
4.1.4.ăÝăngh aăcácăchu n ...................................... Error! Bookmark not defined.
4.2.ăCácăb

căthi tăk ăv tălý ..................................... Error! Bookmark not defined.

4.2.1.ăXâyăd ngătiêuăchu n ................................... Error! Bookmark not defined.
4.2.2.ăăL păk ăho chăt ngăth ............................... Error! Bookmark not defined.
4.2.3.ăXácăđ nhăl

căđ ăphânăchiaăd ăli u ............ Error! Bookmark not defined.

4.2.4.ăThi tăl păkh ăn ngănhómăd ăli u ................ Error! Bookmark not defined.
4.2.5.ăThi tăl păcáchăđánhăch ăs .......................... Error! Bookmark not defined.
4.2.6.ăXácăđ nhăc uătrúcăl uătr ............................ Error! Bookmark not defined.


4.2.7.ăHoànăthi nămôăhìnhăv tălý .......................... Error! Bookmark not defined.
4.3.ăC uătrúcăv tălý.................................................... Error! Bookmark not defined.
4.3.1.ăC uătrúcăd ăli uăl uătr .............................. Error! Bookmark not defined.
4.3.2.ăT iă uăl uătr ............................................. Error! Bookmark not defined.
4.3.3.ăS ăd ngăcôngăngh ăRAID .......................... Error! Bookmark not defined.

4.3.4.ăD ăđoánăkíchăth

căl uătr ........................ Error! Bookmark not defined.

4.4.ă ánhăch ăm căchoădataăwarehouse .................... Error! Bookmark not defined.
4.4.1.ăT ngăquanăv ăch ăm c ................................ Error! Bookmark not defined.
4.4.2.ăCh ăm căB-tree ........................................... Error! Bookmark not defined.
4.4.3.ăCh ăm căBitmap .......................................... Error! Bookmark not defined.
4.4.4.ăCh ăm căchoăb ngăs ăki n .......................... Error! Bookmark not defined.
4.4.5.ăCh ăm căchoăb ngăchi u ............................. Error! Bookmark not defined.
4.5.ăCácăk ăthu tăc iăti năhi uăn ng.......................... Error! Bookmark not defined.
4.5.1.ăPhânălo iăd ăli u ......................................... Error! Bookmark not defined.
4.5.2.ăPhânăc măd ăli u ........................................ Error! Bookmark not defined.
4.5.3.ăX ălýăsongăsong .......................................... Error! Bookmark not defined.
CH
NG 5: XÂY D NG DATA WAREHOUSE CHO EVNError! Bookmark not
defined.
5.1.ăT ngăquanăv ăh ăth ng ...................................... Error! Bookmark not defined.
5.1.1.ăGi iăthi uăv ăEVN ...................................... Error! Bookmark not defined.
5.1.2.ăMôăhìnhăt păđoàn ........................................ Error! Bookmark not defined.
5.1.3.ăM tăs ăth ngăkêătìnhăhìnhăs năxu tăhi năt i Error! Bookmark not defined.
5.1.4.ăYêuăc uăv ăh ăth ngăh ătr ăraăquy tăđ nh .. Error! Bookmark not defined.
5.1.5.ăMôăt ăh ăth ng ............................................ Error! Bookmark not defined.
5.2.ăMinhăch ngătrênăs ăli uăEVN ........................... Error! Bookmark not defined.
5.2.1.ă nhăh

ng ................................................. Error! Bookmark not defined.

5.2.2.ăMôăt ăh ăth ngăm căkháiăni m ................... Error! Bookmark not defined.
5.2.3.ăMôăt ăh ăth ngăm căchiăti t ........................ Error! Bookmark not defined.

5.2.4.ăGi iăthi uăm tăs ăcông c ăh ătr ................ Error! Bookmark not defined.
5.2.5ăK tăqu ăth căhi n ......................................... Error! Bookmark not defined.


CH

NG 6: K T QU VÀ BÀN LU N.................... Error! Bookmark not defined.

6.1.ăCácăk tăqu ăđ tăđ
6.2.ăH

c ......................................... Error! Bookmark not defined.

ngănghiênăc uăti pătheo .............................. Error! Bookmark not defined.

TÀI LI U THAM KH O.......................................................................................... 18


DANH SÁCH HÌNH V
Hìnhă1:ăTínhăch ăđ ătrongădataăwarehouse .................... Error! Bookmark not defined.
Hìnhă2:ăTíchăh pătrongădataăwarehouse ........................ Error! Bookmark not defined.
Hìnhă3:ăD ăli uăkhôngăthayăđ i ..................................... Error! Bookmark not defined.
Hìnhă4:ăCácăthànhăph nătrongădataăwarehouse .............. Error! Bookmark not defined.
Hình 5: Cácăchuăk ăn păd ăli u ..................................... Error! Bookmark not defined.
Hìnhă6:ăThànhăph năphânăphátăthôngătin ....................... Error! Bookmark not defined.
Hìnhă7:ăKh iăd ăli uăđaăchi u ....................................... Error! Bookmark not defined.
Hình 8: Data warehouse và OLTP ................................. Error! Bookmark not defined.
Hìnhă9:ăăKi nătrúcădataăwarehouse ................................ Error! Bookmark not defined.
Hìnhă10:ăMôăhìnhăc b năc aădataăwarehouse .............. Error! Bookmark not defined.
Hìnhă11:ăMôăhìnhădataăwarehouseăvàăti nătrìnhăthuăth păd ăli uError! Bookmark not

defined.
Hìnhă12:ăMôăhìnhăđ yăđ ăv ădataăwarehouse ................ Error! Bookmark not defined.
Hìnhă13:ăH păl păph

ngăchoăl

căđ ăd ăli uă3ăchi u . Error! Bookmark not defined.

Hìnhă14:ăH păl păph

ngăchoăl

căđ ăd ăli uă4ăchi u . Error! Bookmark not defined.

Hìnhă15:ăăM ngămôăt ăd ăli uăđaăchi u ......................... Error! Bookmark not defined.
Hìnhă16:ăL

căđ ăhìnhăsao ............................................ Error! Bookmark not defined.

Hìnhă17:ăl

căđ ăbôngătuy t .......................................... Error! Bookmark not defined.

Hìnhă18:ăl

căđ ăchòmăsao ............................................ Error! Bookmark not defined.

Hìnhă19:ăCácăm căphânăc păd ăli u .............................. Error! Bookmark not defined.
Hìnhă20:ăM căphânăc păchi uăth iăgian ........................ Error! Bookmark not defined.
Hìnhă21:ăMôăhìnhăkh iăd ăli u ...................................... Error! Bookmark not defined.

Hìnhă22:ăCácătoánăt ătrong OLAP ................................. Error! Bookmark not defined.
Hình 23: Mô hình MOLAP ........................................... Error! Bookmark not defined.
Hình 24: Mô hình ROLAP ............................................ Error! Bookmark not defined.


Hìnhă25:ăS ăt

ngăquanăgi aăMOLAPăvàăROLAP ...... Error! Bookmark not defined.

Hìnhă26:ăKi nătrúcătri năkhaiăOLAP ............................. Error! Bookmark not defined.
Hìnhă28:ăQuyătrìnhăthi tăk ............................................ Error! Bookmark not defined.
Hìnhă29:ăCácăthànhăph năc aămôăhìnhăv tălý ................ Error! Bookmark not defined.
Hìnhă30:ăT ngăquanăgi aămôăhìnhălogicăvàămôăhìnhăv tălýError!
defined.
Hìnhă27:ăCácăb

Bookmark

not

căthi tăk ăv tălý .................................. Error! Bookmark not defined.

Hìnhă31:ăMôăhìnhăl uătr ăd ăli u .................................. Error! Bookmark not defined.
Hìnhă32:ăC uătrúcăc aăch ăm căB-Tree .......................... Error! Bookmark not defined.
Hìnhă33:ăC uătrúcăc aăch ăm căBitmap ......................... Error! Bookmark not defined.
Hìnhă34:ăMôăhìnhăt păđoànăEVN .................................. Error! Bookmark not defined.
Hìnhă35:ăS ăđ ăt ngăquanădataăwarehouseăEVN ........... Error! Bookmark not defined.
Hìnhă36:ăL

căđ ăd ăli uătrongădataăwarehouseăEVN .. Error! Bookmark not defined.

Hình 37:ăchi uăd ăli uătrongădataăwarehouseăEVN ....... Error! Bookmark not defined.
Hìnhă38:ăÁnhăx ăthuăth păd ăli uăchoăchi uăth iăgian:ăDTHOIGIANError!
not defined.

Bookmark

Hìnhă39:ăÁnhăx thuăth păd ăli uăchoăchi uăcôngăty:ăDCONGTYError! Bookmark not
defined.
Hìnhă40:ăÁnhăx ăthuăth păd ăli uăchoăb ngăs ăki n:ăCMIS_CUBEError! Bookmark not
defined.
Hình 41: Báo cáo đaăchi uăt ădataăwarehouseăEVNăđưăxâyăd ngError! Bookmark not
defined.
Hìnhă42:ăBáoăcáoăđaăchi uăv iătoánăt ăkhoanăsâuăchoăchi uăth iăgianError!
not defined.
Hình 43: S ăđ ăđaăchi uămôăt ăs năl
not defined.

Bookmark

ngătiêuăth ăđi năc aăcácăđi năl cError! Bookmark

Hìnhă44:ăD ăli uăvàăs ăđ ăchoăm tăbáoăcáoăđaăchi u .... Error! Bookmark not defined.


DÁNH SÁCH B NG BI U
B ngă1:ăDataăwarehouseăvàăkhoăd ăli uătácănghi p ...... Error! Bookmark not defined.
B ngă2:ăDataăwarehouseăvàăkhoăd ăli uăh

ngăch ăđ . Error! Bookmark not defined.

B ngă3:ăKhungănhìnăd ăli uăđaăchi uăđ năgi n ............. Error! Bookmark not defined.
B ngă4:ăKhungănhìnăd ăli uăđaăchi uăchiăti t ................ Error! Bookmark not defined.
B ngă5:ă

cătr ngăc ăb năc aăphânătíchăđaăchi u ......... Error! Bookmark not defined.

B ngă6:ă

cătr ngănângăcaoăc aăphânătíchăđaăchi u ..... Error! Bookmark not defined.

TÀI LI U THAM KH O
Ti ng Vi t
[1]. PGS.TS.ăHoàngăXuânăHu n,ăBàiăgi ngămônăH ăh ătr ăraăquy tăđ nh.
[2]. PGS.TS.ăHoàngăXuânăHu n (2006), Suyăngh ăv ăch ăngh aăxưăh iăvàăđ iăm iăkinhăt xưăh iă ăn căta: Báo qu nălýăkinhăt ăs ă7ă- 3+4/2006,ăVi nănghiênăc uăkinhăt ăqu nălýă
trungă ng,ăb ăk ăho chăvà đ uăt .
[3].ăPTS.ă ăVi tăNga (1999), Thi tăk ăh ăth ngătrongăxâyăd ngă data warehouse vàăh ă
th ngăthôngătinăl n.
[4].ăTàiăli uămôăt ăh ăth ngăthôngătinăqu nălýăđ uăt ă- T p đoàn i năl căVi tăNam.
[5].ăTàiăli uămôăt ăh ăth ngăthôngătinăqu nălýăkháchăhàng - T p đoàn i năl căVi tăNam.
[6].ă Tàiă li uă môă t ă h ă th ngă thôngă tină qu nă lýă nhàă máyă đi nă - T p đoàn
Nam.

i nă l că Vi tă

[7].ăTàiăli uămôăt ăh ăth ngăthôngătinătàiăchínhă- i năl căT p đoàn Vi tăNam.
[8]. Trang web EVN, />Ti ng Anh
[9]. Paulraj Ponniah, Data Warehousing Fundamentals: A Comprehensive Guide for IT
Professionals. John Wiley & Sons, Inc. 2001.
[10]. Yuan Ji, Towards Framework for the Virtual data warehouse Course-based MS

Report April 20, 2001.


[11]. Oracle software: Oracle® Warehouse Builder 10g Release 1 (10.1), User’să Guide
Part No. B12146-01. 2003.
[12]. Oracle software: Oracle® Business Intelligence 10g Release 2 (10.1.2.1) Concepts
Guide B16378-01. 2003.
[13]. Oracle software: Oracle® Database Data Warehousing Guide 10g Release 1 (10.1).
2003.
[14]. Jiawei Han and Micheline Kamber (2001), Data Mining : Concepts
Techniques, Hacours Science and Technology Company, USA.

and

[15]. Gavin Powell(2006), Beginning Database Design, Wiley Publishing, USA.
[16]. James McGovern, Scott W. Ambler, Michael E. Stevens, James Linn, Vikas Sharan,
Elias K. Jo(2003), Practical Guide to Enterprise Architecture, Prentice Hall, USA.
[17]. Keith Andrews (2006), Human Computer Interaction, Keith Andrews, Austria
[18]. Rebecca M. Riordan(2005), Designing Effective Database Systems, Addison
Wesley Professional, USA.
[19]. Steve McConnell (2003), Professional Software Development: Shorter Schedules,
Higher Quality Products, More Successful Projects, Enhanced, Addison Wesley, USA.
[20]. Wendy Boggs Michael Boggs (2002), Mastering UML with Rational Rose 2002,
SYBEX, USA.
[21]. Freitas and S.H. Lavington (1998), Mining very large Database with Parllel
Processing. Kluwer Academic Publishers.
[22]. William H. Inmon (1992), Building the Data Warehouse. QED Technical
Publishing Group.
[16]. Planet Source Code, .