43
Skladištenje podataka Prof.dr.sc. Dražena Gašpar 07.11.2016. IZVORI PODATAKA

IZVORI PODATAKA - SUM · 1. Tema: Kimballova tehniþka arhitekture DW + ETL – priprema za diskusiju 2. Pripremiti prezentaciju ER modela za svoj projekt i izvore podatka u trajanju

  • Upload
    others

  • View
    5

  • Download
    0

Embed Size (px)

Citation preview

Page 1: IZVORI PODATAKA - SUM · 1. Tema: Kimballova tehniþka arhitekture DW + ETL – priprema za diskusiju 2. Pripremiti prezentaciju ER modela za svoj projekt i izvore podatka u trajanju

Skladištenje podataka

Prof.dr.sc. Dražena Gašpar

07.11.2016.

IZVORI PODATAKA

Page 2: IZVORI PODATAKA - SUM · 1. Tema: Kimballova tehniþka arhitekture DW + ETL – priprema za diskusiju 2. Pripremiti prezentaciju ER modela za svoj projekt i izvore podatka u trajanju

Prezentacije ..... Opis problema

Max. 5 minuta

Page 3: IZVORI PODATAKA - SUM · 1. Tema: Kimballova tehniþka arhitekture DW + ETL – priprema za diskusiju 2. Pripremiti prezentaciju ER modela za svoj projekt i izvore podatka u trajanju

Poslovna

Inteligencija

Page 4: IZVORI PODATAKA - SUM · 1. Tema: Kimballova tehniþka arhitekture DW + ETL – priprema za diskusiju 2. Pripremiti prezentaciju ER modela za svoj projekt i izvore podatka u trajanju

Izvori podataka

• Što se podrazumijeva pod pojmom “izvori podataka”

• Uz koju tehnologiju/je se veže pojam “izvori podataka”?

• Kako možemo podijeliti izvore podataka?

Page 5: IZVORI PODATAKA - SUM · 1. Tema: Kimballova tehniþka arhitekture DW + ETL – priprema za diskusiju 2. Pripremiti prezentaciju ER modela za svoj projekt i izvore podatka u trajanju

Izvori podataka

• Interni

• Vanjski

Page 6: IZVORI PODATAKA - SUM · 1. Tema: Kimballova tehniþka arhitekture DW + ETL – priprema za diskusiju 2. Pripremiti prezentaciju ER modela za svoj projekt i izvore podatka u trajanju

Interni podaci

• Ra unovodstveni podaci - primarni izvor internih informacija. Prikazuju poslovne transakcije koje su se dogodile u prošlosti – koriste se kao osnova za planiranje budu nosti (tj. Pripremu financijskog prora una ili predvi anje).

Page 7: IZVORI PODATAKA - SUM · 1. Tema: Kimballova tehniþka arhitekture DW + ETL – priprema za diskusiju 2. Pripremiti prezentaciju ER modela za svoj projekt i izvore podatka u trajanju

Interni podaci

• Ra unovodstveni podaci – koriste se za bilježenje što se doga a s financijskim resursima poslovanja (kako se gotovina pribavlja i troši, koji su resursi potrebni, kakva je dobit/gubitak kao posljedica poslovnih aktivnosti).

Page 8: IZVORI PODATAKA - SUM · 1. Tema: Kimballova tehniþka arhitekture DW + ETL – priprema za diskusiju 2. Pripremiti prezentaciju ER modela za svoj projekt i izvore podatka u trajanju

Interni podaciMogu li ra unovodstveni podaci dati više od financijskih informacija?

Što korisnik može vidjeti iz:• Detalja o proizvedenim proizvodima i isporu enim

iz tvornice?• Ra una kupaca?

KAKO ?

Page 9: IZVORI PODATAKA - SUM · 1. Tema: Kimballova tehniþka arhitekture DW + ETL – priprema za diskusiju 2. Pripremiti prezentaciju ER modela za svoj projekt i izvore podatka u trajanju

Interni podaciVeliki broj internih informacija je povezan s ra unovodstvenim

sustavima, iako nije njihov izravni dio:

• Podaci o zaposlenicima (osobni detalji; što im se pla a; vještine i iskustvo; obuke)

• Podaci o troškovima povezanim s poslovnim procesima (tj. Troškovi ugovora za ulazak u posao i sl.)

• Podaci iz proizvodnog odjeljenja (npr. Broj strojeva, kapacitet;održavanje)

• Podaci o aktivnostima izravno vezanim za kontakte s kupcima(npr. Analiza poziva primljenih i neodgovorenih u call centru)

Page 10: IZVORI PODATAKA - SUM · 1. Tema: Kimballova tehniþka arhitekture DW + ETL – priprema za diskusiju 2. Pripremiti prezentaciju ER modela za svoj projekt i izvore podatka u trajanju

Interni podaci

Page 11: IZVORI PODATAKA - SUM · 1. Tema: Kimballova tehniþka arhitekture DW + ETL – priprema za diskusiju 2. Pripremiti prezentaciju ER modela za svoj projekt i izvore podatka u trajanju

Vanjski izvori podataka

• Informacije koje se odnose na na in kako bi se trebalo poslovati

– Porezni sustav– Porezne obveze– Zakoni (o radu, zaštiti na radu, zaštiti okoliša ...)

Page 12: IZVORI PODATAKA - SUM · 1. Tema: Kimballova tehniþka arhitekture DW + ETL – priprema za diskusiju 2. Pripremiti prezentaciju ER modela za svoj projekt i izvore podatka u trajanju

Vanjski izvori podataka• Informacije o tržištima na kojima se posluje

Marketing inteligencija – tržišna ili kompetitivna inteligencija

Marketinška istraživanja pomažu u:• Boljem i detaljnijem razumijevanju potreba potroša a (što misle o

cijenama, pakiranju, oglašavanju ...)• Smanjenju rizika neuspjeha proizvoda/poslovanja there is no (ažurne

i to ne informacije o stanju na tržištu mogu pomo i pri donošenju odluka).

• Predvi anju budu ih trendova

Page 13: IZVORI PODATAKA - SUM · 1. Tema: Kimballova tehniþka arhitekture DW + ETL – priprema za diskusiju 2. Pripremiti prezentaciju ER modela za svoj projekt i izvore podatka u trajanju

Vanjski izvori podatakaStatisti ki podaci:• Op a statistika o poslovanju (industrija kao cjelina, grane ...)• Statistika o potroša ima• Demografski pokazatelji (pronalaženje poslovnih niša)• Ekonomski indikatori (stopa nezaposlenosti,...)• Statistika zapošljavanja (gdje se zapošljava, ...)• Statistika o dohotku• Novac & kamatne stope• Proizvodnja & prodaja• Statistika trgovine• Statistika za specifi ne industrije

Page 14: IZVORI PODATAKA - SUM · 1. Tema: Kimballova tehniþka arhitekture DW + ETL – priprema za diskusiju 2. Pripremiti prezentaciju ER modela za svoj projekt i izvore podatka u trajanju

Vanjski izvori podataka* Ekonomske anketepodaci prikupljeni od gospodarstva (businesses)

* Demografske anketepodaci prikupljeni od doma instava (households)

Page 15: IZVORI PODATAKA - SUM · 1. Tema: Kimballova tehniþka arhitekture DW + ETL – priprema za diskusiju 2. Pripremiti prezentaciju ER modela za svoj projekt i izvore podatka u trajanju
Page 16: IZVORI PODATAKA - SUM · 1. Tema: Kimballova tehniþka arhitekture DW + ETL – priprema za diskusiju 2. Pripremiti prezentaciju ER modela za svoj projekt i izvore podatka u trajanju

• Maloprodaja – mjese na potrošnja

• Proizvodnja i trgovina: Zalihe i prodaja

• Veleprodaja – mjese na prodaja

• Isporuke za proizvodnju, zalihe, narudžbe

• Kvartalno financijsko izvješ e

• US me unarodna trgovina u raobama i uslugama

• Vrijednost novoizgra enih objekata

• Kvartalno istraživanje usluga

• Zapo eta izgradnja stanova/ku a

• Završeni stanovi/ku e

• Prodani novi stanovi/ku e

• Novi stanovi/ku e na prodaju

• Iznajmljivanje stanova/ku a...

Osnovni ekonomski indikatoriOsnovni ekonomski indikatori

Page 17: IZVORI PODATAKA - SUM · 1. Tema: Kimballova tehniþka arhitekture DW + ETL – priprema za diskusiju 2. Pripremiti prezentaciju ER modela za svoj projekt i izvore podatka u trajanju

Ekonomski popisi

•Svkih 5 godina

•Industrija/proizvod detalji

•Geografski detalji

Ekonomske ankete

•Godišnje, kvartalno, mjese no

•Ograni ena detaljnost

•Uglavnom razina regije, države

Ankete Ankete vsvs popisipopisi

Page 18: IZVORI PODATAKA - SUM · 1. Tema: Kimballova tehniþka arhitekture DW + ETL – priprema za diskusiju 2. Pripremiti prezentaciju ER modela za svoj projekt i izvore podatka u trajanju

2007 Economic Census 2007 Economic Census Key DatesKey Dates

January-December 2007 Period to which census data refer

December 2007

Companies received census forms.

February 12, 2008

Due date for returning census forms

2009-2011 Economic Census reports published

Page 19: IZVORI PODATAKA - SUM · 1. Tema: Kimballova tehniþka arhitekture DW + ETL – priprema za diskusiju 2. Pripremiti prezentaciju ER modela za svoj projekt i izvore podatka u trajanju
Page 20: IZVORI PODATAKA - SUM · 1. Tema: Kimballova tehniþka arhitekture DW + ETL – priprema za diskusiju 2. Pripremiti prezentaciju ER modela za svoj projekt i izvore podatka u trajanju
Page 21: IZVORI PODATAKA - SUM · 1. Tema: Kimballova tehniþka arhitekture DW + ETL – priprema za diskusiju 2. Pripremiti prezentaciju ER modela za svoj projekt i izvore podatka u trajanju
Page 22: IZVORI PODATAKA - SUM · 1. Tema: Kimballova tehniþka arhitekture DW + ETL – priprema za diskusiju 2. Pripremiti prezentaciju ER modela za svoj projekt i izvore podatka u trajanju
Page 23: IZVORI PODATAKA - SUM · 1. Tema: Kimballova tehniþka arhitekture DW + ETL – priprema za diskusiju 2. Pripremiti prezentaciju ER modela za svoj projekt i izvore podatka u trajanju
Page 24: IZVORI PODATAKA - SUM · 1. Tema: Kimballova tehniþka arhitekture DW + ETL – priprema za diskusiju 2. Pripremiti prezentaciju ER modela za svoj projekt i izvore podatka u trajanju
Page 25: IZVORI PODATAKA - SUM · 1. Tema: Kimballova tehniþka arhitekture DW + ETL – priprema za diskusiju 2. Pripremiti prezentaciju ER modela za svoj projekt i izvore podatka u trajanju
Page 26: IZVORI PODATAKA - SUM · 1. Tema: Kimballova tehniþka arhitekture DW + ETL – priprema za diskusiju 2. Pripremiti prezentaciju ER modela za svoj projekt i izvore podatka u trajanju
Page 27: IZVORI PODATAKA - SUM · 1. Tema: Kimballova tehniþka arhitekture DW + ETL – priprema za diskusiju 2. Pripremiti prezentaciju ER modela za svoj projekt i izvore podatka u trajanju
Page 28: IZVORI PODATAKA - SUM · 1. Tema: Kimballova tehniþka arhitekture DW + ETL – priprema za diskusiju 2. Pripremiti prezentaciju ER modela za svoj projekt i izvore podatka u trajanju
Page 29: IZVORI PODATAKA - SUM · 1. Tema: Kimballova tehniþka arhitekture DW + ETL – priprema za diskusiju 2. Pripremiti prezentaciju ER modela za svoj projekt i izvore podatka u trajanju
Page 30: IZVORI PODATAKA - SUM · 1. Tema: Kimballova tehniþka arhitekture DW + ETL – priprema za diskusiju 2. Pripremiti prezentaciju ER modela za svoj projekt i izvore podatka u trajanju

Koristi za javni sektorKoristi za javni sektor

• Benchmarking• Pra enje ekonomskih promjena •Privla enje novih poslova •Pomo u razvoju poslovanja

Page 31: IZVORI PODATAKA - SUM · 1. Tema: Kimballova tehniþka arhitekture DW + ETL – priprema za diskusiju 2. Pripremiti prezentaciju ER modela za svoj projekt i izvore podatka u trajanju

Koristi za privatni sektorKoristi za privatni sektor

Analiza vlastite industrijeTržišni udio Proizvodni trendovi Strateško planiranje

Analiza poslovnih tržištaLokacije gradovaTeritorija prodajePredvi anje prodaje

Gdje su moji kupci?

dobavlja i? konkurencija?

Page 32: IZVORI PODATAKA - SUM · 1. Tema: Kimballova tehniþka arhitekture DW + ETL – priprema za diskusiju 2. Pripremiti prezentaciju ER modela za svoj projekt i izvore podatka u trajanju

HTTP://WWW.LOGIXML.COM/PRODUCTS/LOGI-INFO/DATA-SOURCES/

Izvori podataka:Relational Database Management Systems (RDBMS)

DB2InformixMicrosoft SQL ServerMySQLOraclePostgreSQLSybaseOLEDB and ODBC data sources

Internet sourcesWeb Services (SOAP and REST)Web ScrapingRSS and ATOM Feeds

Page 33: IZVORI PODATAKA - SUM · 1. Tema: Kimballova tehniþka arhitekture DW + ETL – priprema za diskusiju 2. Pripremiti prezentaciju ER modela za svoj projekt i izvore podatka u trajanju

HTTP://WWW.LOGIXML.COM/PRODUCTS/LOGI-INFO/DATA-SOURCES/

Izvori podataka:

Web 2.0 data sourcesAmazon Simple DBGoogle DocsGoogle MapsSalesforceTwitter

File Data SourcesDelimitedFixed Format FilesXML FilesExcel Spreadsheets

Page 34: IZVORI PODATAKA - SUM · 1. Tema: Kimballova tehniþka arhitekture DW + ETL – priprema za diskusiju 2. Pripremiti prezentaciju ER modela za svoj projekt i izvore podatka u trajanju

Poslovna

Inteligencija

Page 35: IZVORI PODATAKA - SUM · 1. Tema: Kimballova tehniþka arhitekture DW + ETL – priprema za diskusiju 2. Pripremiti prezentaciju ER modela za svoj projekt i izvore podatka u trajanju

35

Od skladišta podataka do Data Marta

Manje

Više

PovijesniNormaliziraniDetaljni

Po odjeljenjimaStrukturirano

IndividualnoStruktrurirano

Skladište PodatakaOrganizacijskiStrukturirano

Podatak

Informacija

Page 36: IZVORI PODATAKA - SUM · 1. Tema: Kimballova tehniþka arhitekture DW + ETL – priprema za diskusiju 2. Pripremiti prezentaciju ER modela za svoj projekt i izvore podatka u trajanju

36

Skladište podataka i data martOLAPData MartManje sumarnoPo odjeljenjima strukturirano

Organizacijski strukturiranoAtomiziranoDetaljni podaci skladišta podataka

Page 37: IZVORI PODATAKA - SUM · 1. Tema: Kimballova tehniþka arhitekture DW + ETL – priprema za diskusiju 2. Pripremiti prezentaciju ER modela za svoj projekt i izvore podatka u trajanju

37

Osobine po odjeljenjima - Data Mart

• OLAP• Malo• Fleksibilno• Prilago eno odjeljenju• Izvor je po odjeljenjima

strukturirano skladište podataka

Page 38: IZVORI PODATAKA - SUM · 1. Tema: Kimballova tehniþka arhitekture DW + ETL – priprema za diskusiju 2. Pripremiti prezentaciju ER modela za svoj projekt i izvore podatka u trajanju

38

Tehnike kreiranjapo odjeljenjima - Data Mart

• OLAP

• Podskup

• Zbrojeno

• Superset

• Indeksirano

• Po poljima

Prodaja Mktg.Finan.

Page 39: IZVORI PODATAKA - SUM · 1. Tema: Kimballova tehniþka arhitekture DW + ETL – priprema za diskusiju 2. Pripremiti prezentaciju ER modela za svoj projekt i izvore podatka u trajanju

39

Data Mart orijentirano

Data Marts

Izvori podataka

Skladište podataka

Page 40: IZVORI PODATAKA - SUM · 1. Tema: Kimballova tehniþka arhitekture DW + ETL – priprema za diskusiju 2. Pripremiti prezentaciju ER modela za svoj projekt i izvore podatka u trajanju

40

Problemi s Data Mart orijentiranim rješenjima

Ako se završi na kreiranju više skladišta podataka, integracija postaje ozbiljan problem

Page 41: IZVORI PODATAKA - SUM · 1. Tema: Kimballova tehniþka arhitekture DW + ETL – priprema za diskusiju 2. Pripremiti prezentaciju ER modela za svoj projekt i izvore podatka u trajanju

41

“PRAVO” skladište podataka

Data Marts

Izvori podataka

Skladište podataka

Page 42: IZVORI PODATAKA - SUM · 1. Tema: Kimballova tehniþka arhitekture DW + ETL – priprema za diskusiju 2. Pripremiti prezentaciju ER modela za svoj projekt i izvore podatka u trajanju

Za sljede e predavanje

• Datum: 14.11.2016.

1. Tema: Kimballova tehni ka arhitekture DW + ETL – priprema za diskusiju

2. Pripremiti prezentaciju ER modela za svoj projekt i izvore podatka u trajanju od 5 min max:- minimalno 1 vanjski izvor- podaci iz baze podataka

Page 43: IZVORI PODATAKA - SUM · 1. Tema: Kimballova tehniþka arhitekture DW + ETL – priprema za diskusiju 2. Pripremiti prezentaciju ER modela za svoj projekt i izvore podatka u trajanju

PITANJA