Open BI: Alliander’s Next Gen DWHbi- ?· SAP FICO, CRM, ISU, etc. EDSN SPATIAL SOCIAL GIS ... SAP…

  • View
    212

  • Download
    0

Embed Size (px)

Transcript

  • Powerdesigner , Data Vault, SAP (RDP, BO)

    Open BI: Allianders Next Gen DWH

    Martjan Hendriks BI Architect@Alliander 2013

  • Alliander : Energy Shift Happens

    Largest Dutch Regional GRID Operator (Gas & Electricity)

    Energy Transition means Prosumers Smart Grid Smart Metering Integrate IT/OT/Geo Data Optimize, Innovate & Invest (BIG) Advanced Analytics!

    Need a LOT More BI for a LOT Less and a LOT Quicker!

  • BI 2.0 : Self Service & Platform Synergy

    Data (structured, unstructured,

    On-line In-memory, nearline SSD)

    ERP, DMS, GIS

    EDW (DV)

    COTS BI APPS

    Visualisation

    Function

    Data

    Agile (Co-Creation)

    Lean (Factory)

    Selfservice

    Delegated

    IT

    Platform Processes

    Systematic

    Ad-Hoc Consolidate Custom to SAP

    OLTP & OLAP Data Platform Converges

  • Sourc

    e sy

    stem

    s

    ERP SAP FICO, CRM, ISU, etc.

    EDSN SPATIAL SOCIAL

    GIS (NRG)

    Extern

    Overig Klak, Maint, etc.

    GRID smart devices

    Intern

    Pres

    enta

    tion L

    ayer

    BI Architectuur Next Gen Fit for purpose

    Generieke Businessviews (DV+ALDM)

    Specific Businessviews (DNF Marts)

    Out Of The Box Apps

    (oa SAP BW)

    & Specials: GRID Events (Osisoft PI)

    Meta

    data

    co

    ntr

    ol En

    vir

    on

    men

    t

    Staging in

    EDW System of Fact (Data Vault)

    Rule Vault

    Persistant Staging (ODS)

    Dat

    a La

    yer

    = abstractie/federatielayer = Storage physical or virtual

    = dataflow

  • Knowledge to the Model & Lineage

    Rich Source Model Publication ODS Replication (CDC)

    Collect Expert Domain Knowlegde Annotate & Classify Source Model

    Auto Generate -EDW Data Model & Mappings -EDW Model & ETL Code

    Raw Vault Rule Vault Error Vault Metrics Vault DQ Vault

    (Virtual) Business Views Datamart & Universe Convergence Self Service Data Catalog Publication With Lineage

    All Models Linked! Round Trip Traceability

    Source BI

    Corp LDM

    Lync with Corporate Logica Data Model

    Source

    Corp LDM

    BI (MARTS)

    BI EDW

  • Roadmap Ahead

    SAP HANA In Memory Replace Legacy CDC Vault Geo Spatial Vault MDM & DQ Vault

    Metingen & Events GV ITRON EE Aanluitschetsen Diasys Gaslekopsporing GLZ Aanvragen SAP CRM Inkoop SAP MM Metingen & Events KV Netinium Asset Masterplan SAP BW/IP Graaf meldingen WebKLIC Workflow KLAK Leveranciers SAP SRM SCADA metingen DMS Infrastructuur Energienet NRG Gravers Ervaringen SAP IS-U Projecten SAP PS Magazijnen SAP WMS Schakelstanden DMS Meters SAP IS-U Onderhoud Netten MAINT Vrije domein SAP PS Materialen SAP MM

    MSR Kit configuratie SAP PM Storingen KLAK Werkorders KLAK Transport SAP MM Net Telecom Infra TKN 2000 Werkorders KLAK Werkorders SAP CS Voorraad SAP MM

    Werkorders SAP CS Workflow KLAK

    Klant & Relaties SAP IS-U Distributie MV MDS (+) Aansluiting C-AR KvK Contracten & Offertes SAP SD Handopname MOS Switch & Verhuisber. REAL/CATS/JMAIL Kadaster Facturen uitgaand SAP SD Meetdata interval GV ITRON EE Meetdata distributie DAP, NimBUS Gemeente/Provincie Credit & Collectie SAP CCM Meetdata interval KV Netinium Meetdata periodiek SAP IS-U Demografische referentie data Contacten SAP CRM Meter events Infra Alloc & Recon E SAP Tesla (A), KRM (R) Geografische referentie data Claims MS Excel Meterpark beheer MAINT Alloc & Recon G SAP EDM (A), EDM (R) Leegstand Colt

    Boekhouding SAP FI/CO Organisatiestructuur Peoplesoft Inspecties HS Inspector Consolidatie Cognos Uren SAP HR/CATS Juridische Rechten SAP CS

    Meldingen Promasys Onderhoud HS I-Core Servicemeldingen James

    Energienet dynamisch Energienet statisch

    Finance Overig

    Realiseren Storing, onderhoud & onderbrekingen

    Logistiek

    Data Collectie (MV) Externe Referentie Gegevens

    Organisatie

    Marktfacilitering Klant

  • BONUS

  • Componenten waaruit de fabriek bestaat

    Open BI ontwerp richtlijnen en standaarden Pagina 8

    12

    3

    4

    5

    6

    1. Modellering & Generators (PowerDesigner) 2. Centraal open metadata model 3. Batchverwerkingsprocedures (Oracle) 4. Fysiek EDW model 5. Gegenereerde ETL objecten 6. Gernerieke databron (ODS)

  • Alliander BI voorziening 1.3 9

    Richtlijn Datakwaliteit EDW Integratie Generieke oplossing Meetresultaten zijn een product van toegepaste businessrules en worden in de rule-vault opgeslagen. Dit gebeurt in een datakwaliteit satelliet volgens een standaard structuur die op de hub of link gekoppeld is waarvoor gemeten is. De context voor de meting wordt niet vastgelegd.

  • BI Data Gebieden indeling, afkomst & status (Subject Areas) De data gebieden geven in 1 overzicht een logisch, herkenbaar, tijdstabiel en dekkende indeling van data die relevant is voor BI. Daarbij is een subindelng gemaakt en aangegeven welke systemen daarvoor leidend zijn en wat hun status is van ontsluiting in een van de Alliander data warehouses.

    Blauw gekleurde deelgebieden zijn reeds ontsloten in Open BI (EDW), groen in SAP BW, geel in de BAR en oranje in het CDB datawarehouse. beschikbaar in SAP BW. Blauw gekleurde gebieden in de Basis Asset Repository (BAR), Oranje in het Scada Warehouse (CDB).

    Overzicht relevante bronsystemen De deelgebieden verwijzen allen naar Alliander bronsystemen, die rechts zijn samengevat. Hiermee worden de data stromen tussen BI en de bronsystemen transparant.

    Metingen & Events GV ITRON EE Aanluitschetsen Diasys Gaslekopsporing GLZ Aanvragen SAP CRM Inkoop SAP MM Metingen & Events KV Netinium Asset Masterplan SAP BW/IP Graaf meldingen WebKLIC Workflow KLAK Leveranciers SAP SRM SCADA metingen DMS Infrastructuur Energienet NRG Gravers Ervaringen SAP IS-U Projecten SAP PS Magazijnen SAP WMS Schakelstanden DMS Meters SAP IS-U Onderhoud Netten MAINT Vrije domein SAP PS Materialen SAP MM

    MSR Kit configuratie SAP PM Storingen KLAK Werkorders KLAK Transport SAP MM Net Telecom Infra TKN 2000 Werkorders KLAK Werkorders SAP CS Voorraad SAP MM

    Werkorders SAP CS Workflow KLAK

    Klant & Relaties SAP IS-U Distributie MV MDS (+) Aansluiting C-AR KvK Contracten & Offertes SAP SD Handopname MOS Switch & Verhuisber. REAL/CATS/JMAIL Kadaster Facturen uitgaand SAP SD Meetdata interval GV ITRON EE Meetdata distributie DAP, NimBUS Gemeente/Provincie Credit & Collectie SAP CCM Meetdata interval KV Netinium Meetdata periodiek SAP IS-U Demografische referentie data Contacten SAP CRM Meter events Infra Alloc & Recon E SAP Tesla (A), KRM (R) Geografische referentie data Claims MS Excel Meterpark beheer MAINT Alloc & Recon G SAP EDM (A), EDM (R) Leegstand Colt

    Boekhouding SAP FI/CO Organisatiestructuur Peoplesoft Inspecties HS Inspector Consolidatie Cognos Uren SAP HR/CATS Juridische Rechten SAP CS

    Meldingen Promasys Onderhoud HS I-Core Servicemeldingen James

    Energienet dynamisch Energienet statisch

    Finance Overig

    Realiseren Storing, onderhoud & onderbrekingen

    Logistiek

    Data Collectie (MV) Externe Referentie Gegevens

    Organisatie

    Marktfacilitering Klant