UNLOCKING THE POTENTIAL OF DATA

Transkript

1 UNLOCKING THE POTENTIAL OF DATA Grunddata og Datafordeler - forretningsmæssige udfordringer og muligheder for finansielle virksomheder September 24 th 2015 Nicolas Horst KMD Grunddata

2 PUBLIC BASIC-DATA IS THE FOUNDATION FOR PUBLIC AUTHORITIES AND PRIVATE COMPANIES TO PERFORM ESSENTIAL DAILY TASKS Background on basic-data and the basic-data programme Basic data is various core information about individuals, businesses, real properties, buildings, addresses, and more, used by the Public authorities while the scope of the basicdata program is harmonize and registers and establish a distribution infrastructure The most important objectives for the programme is that it is correct, complete and up-to-date that all public authorities use public sector basic data that it is freely available to businesses as well as the public that it is distributed efficiently that it accommodate the needs of the users Public sector basic-data is information about... Owns People Employed in Business Owns Real Estate Owns Located at Lives on Adresses, Roads etc. Exists on Determines the location Maps and Geography The civil registration system (CPR) is a central, nationwide due register, which assign a personal number (social security number) for secure identification to everyone Business master data is stored in the Central Business Register and in the Company Register Real property master data includes data on land parcels, buildings and dwellings Address master data are data relating to road names, postal codes etc., and place names which are known names for places or areas such as cities, hospitals, etc. Geographic basic data is location-specific data e.g. about land parcels, buildings, road infrastructure, watercourses and lakes 2

3 Shadow reg. Core reg. Distribution platform Distribution platform Distribution platform Distribution platform Distribution platform DATA IS LIMITED BY SILOS, MULTIPLE DISTRIBUTION PLATFORMS AND DOUBLE REGISTRATION THROUGH SHADOW REGISTERS Solution area Illustration (non exhaustive) Market structure / maturity Value-added products Underdeveloped market, following wideranging legal restrictions Silo based market approach has led to technological and organizational barriers and a low level of flexibility Distribution Many solutions are technically obsolete, consequently not capable of delivering the desired data as fast as needed Great number of individual systems for distributing basic data People Companies Real Estate Adresses, Roads etc. Maps and Geography Strong pressure on registers due to increasing demand for data Master data management Problems with gaps and redundancy in the data sets, has resulted in shadow registers to enable delivery the service requested 3

4 THE BASIC DATA PROGRAM - UNLOCKING THE POTENTIAL OF PUBLIC MASTER DATA About the Agreement: Initiated by the Government and KL. Investments of approximately mdkk 930 until 2016 Establishing a common public data distributor Common architecture & data model 4

5 THE DATA DISTRIBUTOR LOOKUP, SERVICES & DOWNLOAD Enriched Data DATA DISTRIBUTOR UPDATING Basic Data 5

6 Configurable Dataleverancespecifikation (DLS) Grunddata Register Grunddata Register Opdatering Synkroniser ing PostGre PostGre PostGre De-normaliserede data (performancehensyn) Core System Services Soap Rest Fildownload WMS/WMTS WFS WCS SQL Server Postgre- SQL System data Grunddata Konfigurerbart

7 TIME SCHEDULE FOR DATA ON THE COMMON DATA DISTRIBUTOR FASE 1 FASE 2 FASE 3 DAGI Skærmkort Højdemodel (Featured datasets from the above) CPR CVR VUR Stednavne BBR DAR Matriklen Ejerfortegnelsen September 2015 Q Q Common properties for all datasets: Common model Interfaces, standards and data models are coordinated Governance for future changes established

8 REGLER OM GENERELLE EGENSKABER - ALLE MODELENTITETER SKAL MODELLERES: Med Persistent, unik identifikation (HTTP URI) Med Status, der klart angiver, hvor et forvaltningsobjekt er i sin livscyklus Med Dobbelthistorik, der klart angiver registreringstid, virkningstid og aktører. Det dobbelte består i, at to tidsaspekter virkningstid og registreringstid håndteres i sammenhæng Så Beskedfordeling understøttes 8 8 Link til modelregler for grunddata og arkitekturforum for relevante dokumenter

9 VILKÅR FOR BRUG AF DE OFFENTLIGE GRUNDDATA Generel information [Indsæt betegnelsen for den offentlige myndighed, som konkret stiller data til rådighed], herefter Myndigheden, som har de immaterielle rettigheder til [indsæt betegnelsen for/en henvisning til data, der konkret stilles til rådighed] (herefter data), giver på nedenstående vilkår brugsret til data Vilkårene accepteres ved enhver brug af data. Vilkårene reguleres af dansk ret. Brugsret Myndigheden giver en verdensomspændende, gratis, ikke-eksklusiv, og i øvrigt ubegrænset brugsret til data, som frit bl.a. kan: kopieres, distribueres og offentliggøres, ændres og sammensættes med andet materiale bruges kommercielt og ikke-kommercielt, Vilkår Data må ikke bruges på en måde, så det kan fremstå som om, at myndigheden godkender, støtter, anbefaler eller markedsfører brugeren, brugerens produkter eller tjenester. Det skal sikres, at brug af data er i overensstemmelse med dansk ret. [indsæt evt. yderligere beskrivelse af/ henvisning til lovgivning om brug af data og evt. forpligtelse til at oplyse herom]. Kildeangivelse Ved brug af data [indsæt kan eller skal] følgende angives: [indsæt [Indeholder data, som benyttes i henhold til vilkår for brug af danske offentlige data] eller [specifik kildeangivelse for myndighed og data]] Myndighedens rettigheder og ansvar Data stilles til rådighed, som de er, og myndigheden har intet ansvar for hverken indhold, oprindelse, fejl og mangler eller nogen form for skade, der måtte følge af brug af data. 9

10 STRATEGI FOR BEDRE DATA OG SERVICES FOR JER! MULIGHEDER OG UDFORDRINGER MED DATA IF THE RATE OF CHANGE ON THE OUTSIDE EXCEEDS THE RATE OF CHANGE ON THE INSIDE, THE END IS NEAR! JACK WELCH

11 DET DIGITALE WILD WEST STORE FORANDRINGER I IT OG DATA LANDSKABER CENTRAL STYRING OG DECENTRAL IMPLEMENTERING OG GEVINSTREALISERING

12 KOMPLEKS VERDEN MANGE DATA MANGE FAGAPPLIKATIONER MANGE PLATFORME AS A SERVICE: DATADISTRIBUTION BUSINESS INTELLIGENCE BIG DATA ANALYTICS

13 DATA GRUNDDATA JERES DATA SAMARBEJDSPARTNERS DATA EKSTERNE DATA DATAFORDELER SERVICEPLATFORM NATIONAL SUNDHEDSPLATFORM

14 SIKKERHED IT SIKKERHED DATA SIKKERHED PRIVACY - I DANSK OG EUROPÆISK KONTEKST

15 KMD COGNITO DATA MED INDSIGT

16 KMD SKABER NY PRODUKTFAMILIE KMD COGNITO KMD Cognitofamilien samler de nye løsninger, som vi præsenterer fremadrettet til jer KMD Cognito leverer data og services på tværs af områder. Selv komplekse data bliver tilgængelige KMD Cognito sikrer data med indsigt 16

17 KMD COGNITO LOCAL UTILILY PRIVAT EXCHANGE CONSULTING ACCESS Vi er blevet moderne, tro det eller ej! #nytnavn #KMDCognito #sammenudviklervidk

18 Shadow reg. Core reg. Distribution platform Distribution platform Distribution platform Distribution platform Distribution platform Cockpit FUTURE VISION FOR MARKET OF DATA MANAGEMENT AND DISTRIBUTION Decentralised data distribution (Data container) Solution area Illustration (non exhaustive) Description KMD Cognito Finance Value-added products Traffic Finance Consumer Behaviour Business development Town Planning Distribution Datafordeleren Centralised data Exchange platform Public master data Private master data People Companies Real Estate Adresses, Roads etc. Maps and Geography Utilities Social media Finance Tele Agriculture Health Master data management 18

19 KMD COGNITO ACCESS - SKÆRMBILLEDER 19

20 Big Data represents a different regime within data mining A coherent shift for Business and IT => new demand for Data Scientists Business improvements More relevant for customers Real time analytics Improved Risk management Customer experience Known Customer Better understanding of customer behaviour Proactive customer handling Fostered by new technology It capabilities Cheap, scalable and reliable Large(r) data sets Self healing systems It operation optimization Log analysis Analytical capabilities Access to hidden information Looking for unknown structures (Machine Learning) Data of any structure Compare with customer segments

21 VI MØDER JER PROFESSIONELT OG I ØJENHØJDE SAMARBEJDER GERNE MED KONKURRENTER VI ARBEJDER MUDULÆRT OG SKALERBART

22 VI ER MED JER HELE VEJEN TAK FOR NU NICOLAS HORST LINKEDIN: KMD GRUNDDATA DET SKAL UDVIKLES VÆK! #SAMMENUDVIKLERVIDANMARK 22

23 BACKUP/EXTRA KMD 23

24 STATENS, KLS & DRS GRUNDDATAPROGRAM KORT FORTALT v/ Nicolas Lemcke Horst

25 AGENDA 1. Grunddataprogrammet kort fortalt Grunddata - mere konkret 2. Datafordeleren et paradigme skifte Baggrund og teknologi 3. KMDs strategi arbejde om data og data distribution 25

26 Værdikæde z y Informationsskabelse System x Anvendelse Operationel anvendelse Opsamling og deling Udnyttelse Fangst Manuel automatisk Anvendelse Fagsystemer Produktionssyste mer Opbevaring Intern distribution Datavarehus Sikker datadeling Distribution Søgning Behandling Opbevaring Forretningsafklaret, -styret og koordineret informationshåndtering (MDM). Analyse prognoser evalueringer benchmarking mønster Data dør bliver historiske

27 1. GRUNDDATAPROGRAMMET Grunddataprogrammet skal sikre gode sammenhængende grunddata, der opdateres et sted og anvendes af alle. VÆKST i den private sektor EFFEKTIVISERING i den offentlige sektor med fælles løsninger MULIGHEDER for at forbedre servicen for borgere og virksomheder med digitale løsninger 27

28 Shadow reg. Core reg. Distribution platform Distribution platform Distribution platform Distribution platform Distribution platform 2. TODAY BASIC-DATA IS LIMITED BY MULTIPLE DISTRIBUTION PLATFORMS, DOUBLE REGISTRATION AND SHADOW REGISTERS Solution area Illustration (non exhaustive) Market structure / maturity Value-added products Underdeveloped market, following wideranging legal restrictions Silo based market approach has led to technological and organizational barriers and a low level of flexibility Distribution Many solutions are technically obsolete, consequently not capable of delivering the desired data as fast as needed Great number of individual systems for distributing basic data People Companies Real Estate Adresses, Roads etc. Maps and Geography Strong pressure on registers due to increasing demand for data Master data management Problems with gaps and redundancy in the data sets, has resulted in shadow registers to enable delivery the service requested 28

29 DIGITALISERINGSSTYRELSENS - PROGRAM FOR GRUNDDATA Grunddataprogrammet sikrer gode sammenhængende grunddata, der opdateres ét sted og anvendes af alle. Sikre fri adgang til offentlige grunddata for myndigheder, virksomheder og borgere KOMBIT koordinere udfasningen af eksisterende systemerne i relation til grunddata september 2015 Om aftalen: Igangsat af regeringen og KL regionerne også med Investeringer for ca. 930 mio. kroner frem til 2016 Etablering af fællesoffentlig datafordeler Fælles arkitektur og datamodel Etablering af en tværoffentlig grunddatabestyrelse Milepæle og fokus i 2015: Tættere offentligt digitalt samarbejde Digitaliseringsstrategi Realisere business casen og gevinsterne Etablering af samlet programplan skal sikre bedre fremdrift forår 2015 Dialog med kommuner, regioner og private virksomheder om potentialer og gevinster Politisk behandling af analysen af effektiv personregistrering 29

30 PRINCIPPER FOR TILGÆNGELIGHED OG ANVENDELSE Grunddata kan anvendes som defineret i de fælles vilkår for grunddata (juridisk tilgængelige). Grunddata kan anvendes uden betaling for rettigheder til data (økonomisk tilgængelige). Grunddata kan tilgås via Datafordeleren (teknisk tilgængelige). Alle offentlige myndigheder skal, pr aftale eller de facto, anvende grunddata, hvor data er relevante. 30

31 PRINCIPPER FOR PRODUKTION OG VEDLIGEHOLDELSE Grunddata skal være relevante for flere offentlige myndigheder Grunddata skal være fælles anvendelige Grunddata skal være veldefinerede og kvalitetssikrede Grunddata er tilstrækkeligt komplette og korrekte til de væsentligste anvendelser af data Grunddata tilknyttes en entydig og stabil identifikation Grunddatas dataformat er i overensstemmelse med den fælles datamodel Ansvaret for grunddatas kvalitet og vedligeholdelse er klart placeret Grunddata opdateres kun ét sted Produktion og vedligeholdelse af grunddata sker effektivt 31

32 GRUNDDATA MERE KONKRET 32

33 HVAD ER GRUNDDATA 33

34 EJENDOMSDATA (GD 1) Der etableres en forbedret og sammenhængende infrastruktur på ejendomsområdet Matrikel (GST) Ejerfortegnelsen (GST) BBR (MBBL) Et fælles ejendomsbegreb: Bestemt Fast Ejendom 34 34

35 ADRESSEDATA (GD 2) Det autoritative adresseregister bliver BBR Vejnavne og adresser (MBBL) Stednavne (GST) Administrative inddelinger (GST) Nyt adresse register etableres (DAR) CPR og CVR trækker fra BBR Aktualiteten og kvaliteten af adressedata øges Et stednavnesystem etableres Danmarks administrative geografiske inddeling (DAGI) udbygges som et grundregister, De kommunale inddelinger og distrikter vedligeholdes efter ensartede standarder og normer 35

36 GEODATA OG KLIMATILPASNING (GD 3 & 4) Geografiske grunddata frikøbes Danmarks Højdemodel bliver ajourført fremadrettet Ny organisering omkring FOT Etablering af et fælles grundlag til vandforvaltning og klimatilpasning Etablering af en hydrologisk højdemodel 36

37 PERSONDATA (GD 5) Analyse af en mere effektiv og sammenhængende personregistrering og distribution af persondata Persondata er i første omgang ikke omfattet af frikøb af grunddata Persondata vil fortsat være beskyttet Indstilling pga. analysen Teknisk modernisering CPR nr. fastholdes Klargøring til et journalnummer Politisk beslutning ultimo

38 VIRKSOMHEDSDATA (GD 6) CVR- og selskabsdata får et kvalitets forbedres Virksomheder under kr. i årlig omsætning registreres Udenlandske virksomheder kan registreres Antal ansatte i intervaller Tegningsreglerne struktureres til anvendelse i digital forvaltning Geografisk placering SE-numre udfases om muligt CVR validerer adresser mod BBR-registeret (DAR) 38

39 GRUNDATAS GOVERNANCE Grunddataprogrammet Bestyrelsen Grunddatasekrateriatet Programkoordinationen Arkitekturforum GD 8 Kontakt udvalg??? Landbrug? Finans Virksomhedsdata GD6 Persondata GD5 Geodata GD4 Klimatilpasning og vanddata GD3 Adressedata GD2 Ejendomsdata GD1 Tværgående kompunenter Datafordeleren GD 7 Fælles datamodel 39 Link Digitaliseringsstyrelsen: Medlemmer i Grunddatabestyrelsen og styregrupperne

40 GRUNDDATAMODELLEN For at grunddata effektivt kan anvendes af brugerne, skal datamodellerne for de enkelte grunddata være ensartede og sammenhængende. Grunddatamodellen sikre en samlet og sammenhængende model i et distribueret forvaltningsmiljø. Link til modelregler for grunddata og arkitekturforum for relevante dokumenter 40

41 FÆLLES DATAMODEL Grunddataprogrammet Grunddatasekrateriatet Programkoordinationen Arkitekturforum GD 8 Ejendomsdata GD1 MBBL Adressedata GD2 Vanddata GD3 Geodatastyrelsen Geodata GD4 Persondata GD5 CPRkontoret Virksomhedsdata GD6 Erhvervsstyrelsen Tværgående produkter Datafordeleren GD7 Fælles datamodel KL DR ATP SKAT 41

42 REGLER OM GENERELLE EGENSKABER - ALLE MODELENTITETER SKAL MODELLERES: Med Persistent, unik identifikation (HTTP URI) Med Status, der klart angiver, hvor et forvaltningsobjekt er i sin livscyklus Med Dobbelthistorik, der klart angiver registreringstid, virkningstid og aktører. Det dobbelte består i, at to tidsaspekter virkningstid og registreringstid håndteres i sammenhæng Så Beskedfordeling understøttes 42 Link til modelregler for grunddata og arkitekturforum for relevante dokumenter 42

43 GRUNDDATAMODELLEN Et samlet overblik ( indholdsfortegnelse ) Så grunddata fremstår sammenhængende for interessenterne Grunddata som de udstilles for databrugere (interne + eksterne) og systemudviklere Central opbevaring og udstilling Link til modelregler for grunddata og arkitekturforum for relevante dokumenter

44 DATAFORDELEREN 44

45 DATAFORDELEREN Skal distribueres alle grunddata På sigt kan andre data også distribueres Dataejerskabet for grunddata er uforandret Opdatering af grunddata sker (uforandret) gennem eksisterende grænseflader Grunddata kopieres til datafordeleren med en frekvens, der er understøtter brugernes behov for aktualitet Grunddata distribueres på en åben licens Grunddata opbevares og distribueres i henhold til gældende dansk og europæisk lovgivning 45

46 VILKÅR FOR BRUG AF DE OFFENTLIGE GRUNDDATA Generel information [Indsæt betegnelsen for den offentlige myndighed, som konkret stiller data til rådighed], herefter Myndigheden, som har de immaterielle rettigheder til [indsæt betegnelsen for/en henvisning til data, der konkret stilles til rådighed] (herefter data), giver på nedenstående vilkår brugsret til data Vilkårene accepteres ved enhver brug af data. Vilkårene reguleres af dansk ret. Brugsret Myndigheden giver en verdensomspændende, gratis, ikke-eksklusiv, og i øvrigt ubegrænset brugsret til data, som frit bl.a. kan: kopieres, distribueres og offentliggøres, ændres og sammensættes med andet materiale bruges kommercielt og ikke-kommercielt, Vilkår Data må ikke bruges på en måde, så det kan fremstå som om, at myndigheden godkender, støtter, anbefaler eller markedsfører brugeren, brugerens produkter eller tjenester. Det skal sikres, at brug af data er i overensstemmelse med dansk ret. [indsæt evt. yderligere beskrivelse af/ henvisning til lovgivning om brug af data og evt. forpligtelse til at oplyse herom]. Kildeangivelse Ved brug af data [indsæt kan eller skal] følgende angives: [indsæt [Indeholder data, som benyttes i henhold til vilkår for brug af danske offentlige data] eller [specifik kildeangivelse for myndighed og data]] Myndighedens rettigheder og ansvar Data stilles til rådighed, som de er, og myndigheden har intet ansvar for hverken indhold, oprindelse, fejl og mangler eller nogen form for skade, der måtte følge af brug af data. 46

47 KMD UDVIKLER DATAFORDELEREN 47

48 Tjenester Konfigurerbar Synkronisering Opdatering Skalering Cache Datamodel

49 Modulært opbygget Komponenter Synkronisering Opdatering Dynamiske applikations services Switchboard Teknologiskift

50 Hybrid Cloud Dynamiske applikations services Komponentbaseret Skalerbar

51 Udviklet til forandring

52 DATAFORDELEREN MERE KONKRET 52

53 ARKITEKTUREN I LØSNINGEN Soap Base Register Base Register Updating Synchroni -sing PostGre PostGre PostGre Copy data (De-normalized) Performance optimazation Core System Services Rest File WMS/WMTS WFS WCS Data delivery agreement (1 per base register) SQL Server System data Postgre- SQL Basic Data Dokument nr./version 23. september 2015 Datamodel Services Updating & Synchronising Configureable DIAS 53

54 Nicolas Lemcke Horst Mobil: