Historische informatie in een Spatial Dynamisch Data Warehouse
Wil de Jong Enterprise Architect
Spatial Eye Synergiedag 2 februari 2012
Aanleiding Business Intelligence project
De oplossing en aanpak BI-Visie BI-Architectuur / concept
Uitdagingen -
Gebruik standaard modellen
-
Opbouwen historische data
-
Extractie spatial data
Realisatie Project Toekomst Lessons Learned
2
Veelheid aan rapportages en tools -
Interpretatie verschillen
-
Presentatie verschillen
-
Geen eenduidig beeld
Onvoldoende ondersteuning (geo) grafische analyses op gegevens uit verschillende bronnen
Informatie & functionaliteit nodig voor
3
-
Nemen van de juiste (investerings) beslissingen
-
Verzorgen juiste rapportages naar wetgever
-
Inzicht in datakwaliteit
4
John Naisbett
5
Beter inzicht in toestand bedrijfsmiddelen -
Alleen investeren waar nodig
-
Prioriteren van vervangingen
-
Optimalisatie onderhouds strategie
-
Storingsanalyse i.r.t. bedrijfsmiddelen en locatie
-
Inzicht in historische gegevens bedrijfsmiddelen
Eenduidige rapportage
6
-
Toe- en afname bedrijfsmiddelen
-
Data kwaliteit
-
Proces performance
-
Financiële verantwoording
1. Visie
2. Doel Architectuur 3. Pilot project 4. Roadmap
5. Realisatie 7
BI voorziet Enexis van informatie om te kunnen sturen op het behalen van gestelde doelen Informatie zowel voor medewerkers
en management zodat ze zelf kunnen sturen Informatie consistent, betrouwbaar, geïntegreerd, eenvoudig toegankelijk
Informatie op juiste moment en met juiste detail
Gebruiker aan de knoppen 8
Verschillende soorten informatie zijn nodig. Naast verantwoordings- en stuurinformatie, behoefte aan dynamische informatie over processen en de primaire infrastructuur. De BI architectuur is niet te
vangen in één BI applicatie. Belangrijk daarbij is dat een centrale regie wordt gevoerd
op de BI architectuur.
9
Ontwerp BI-architectuur -
10
BI-architectuur is gebaseerd op functionele- en niet functionele eisen van dit moment. De inrichting van de architectuur is echter voor langere termijn. 20/80 regel: – Grootste deel van de ontwerp inspanning wordt gestopt in de nieuwe opzet, maar dit is maar 20 % van het totale werk op het DWH. – 80 % van de inspanning op de levensduur van een DWH zit in het beheer
DWHA
DWHB 11
Gebruik standaardmodellen (CIM-BAG) voegt waarde toe Datakwaliteit controle en historie toevoegen in staging laag: -
Eerst 1 op 1 extractie met datavalidatie en kwaliteits controle Dan brondata voorzien van historie Dan vertaling naar generiek data model
ETL-tools -
SAP-extractie met SAP-BW Specifiek ETL tool nodig voor Spatial data Generiek ETL tool voor overige bronnen
Snel ontwikkelen met juiste tools -
12
In pilot 3 concrete businessvraagstukken uitgewerkt m.b.v. Spatial Workshop en SAP Business Objects Suite Proeftuinomgeving voor ontwikkeling
Standaard Standaard Standaard
Meta Data laag ECDM
EBDM
CIM model BAG model
GIS Applicatie datamodel
ECDM
SAP Applicatie datamodel
vertaling
DMS Applicatie datamodel
vertaling
OVERIG Applicatie datamodel
vertaling
Bronlaag
DataWareHouse
vertaling
EBDM
Geo spatial Analyses
Staginglaag
Gegevenslaag
ECDM
Enexis Service Bus
Informatie
Applicatie Integratie 13
Waarom ? -
Betere rapportage toezichthouder bv: km vervangen GGY in 2009
-
Evalueren onderhoud- en vervangingsrichtlijnen, risico analyse
Hoe ? -
Extractie zoveel mogelijk 1 op 1 uit bron
-
per object tijdsgeldigheid toevoegen middels start en eind datum
Maar: -
Aanvullende eisen aan data mutatie (Muteren conform werkelijkheid)
-
Door toevoegen historie zal data-omvang sneller toenemen: Kritisch op noodzaak historische informatie Kritisch op bewaartermijn
14
Analyse op bepaald moment in de tijd
Visualiseren en analyseren van veranderingen in de tijd Kiezen van de 2 momenten waar tussen het verschil bepaald wordt Verandering tussen 2 momenten in
Verandering tussen 2 momenten in
de tijd, zichtbaar gemaakt per object
de tijd, zichtbaar gemaakt voor
per attribuut
geometriën
Beschikbare ETL tools bieden
onvoldoende functionaliteit voor Spatial Data -
Geen ondersteuning geometrievelden
-
Automatische datamodel verandering
-
Beperkte registratie historie
-
Performance van de extractie
-
Ondersteuning voor foutafhandeling
-
Gebruiksvriendelijkheid
Daarom specifiek ETL tool voor spatial data ontwikkeld in
samenwerking met: 17
van bron tot eindgebruiker
DWHA
DWHB 19
20
Metadata laag
BW
DWH-A BW
ERP
ISU / CRM
ERP
ISU
DMS MS Excel
NESTOR
MS Access
GIS Bronlaag 21
Staginglaag
Gegevenslaag
Informatie
Inrichting Dynamisch Data Ware House omgeving -
Generieke ETL omgeving en Spatial ETL
-
Dynamische Data Ware House (incl. proeftuin)
-
Benodigde end-user tools
Opstellen Enexis Common Data Model Inrichten Data Governance en Meta Data Beheer Oplevering aantal concrete vraagstukken
22
-
Onderhoudsanalyse
-
Prioritering vervanging gasleidingen (gaspriotool)
-
Data metingen
Metadata laag
Enexis Common Data Model
CIM BAG
Model beheer tool
SAP Data Integrator 1:1
historie
Enexis Business Data Model
BO-suite DWH-A BW
ERP
ISU / CRM
ECDM
DWH-B
DMS
EBDM
NESTOR GIS ETL GIS Bronlaag 23
Geo spatial Analyses
Staginglaag
Gegevenslaag
Informatie
Metadata laag
Enexis Common Data Model
CIM BAG
Model beheer tool
SAP Data Integrator 1:1
historie
Enexis Business Data Model
BO-suite DWH-A BW
ERP
ISU / CRM
ECDM
DWH-B
DMS
EBDM
NESTOR GIS ETL GIS Bronlaag 24
Geo spatial Analyses
Staginglaag
Gegevenslaag
Informatie Informatielaag
Bronnen alleen ontsluiten indien er vraag is naar analyse of rapportages i.c.m. andere bronnen Intensieve business betrokkenheid Architectuur Governance vanaf begin
BI-Omgeving moet schaalbaar zijn en robuust voor verandering
Houd het zo simpel mogelijk 25
26
voor uw
27