Glossy KNMI Open Data KDC ESA
Raymond Sluiter KNMI
Introduction KNMI KNMI: “The national institute for weather, climate research and seismology in The Netherlands”... KNMI is an agency of the Ministery of Infrastructure and Environment.
2
GLOSSY | 12 juni 2013
Main activities • Operational services Weather forecasts (public & especially aviation) Weather alerts • Research Improve weather forecasting Climate research including Climate change models (numerical computation) Sensor research • Observations Meteorological observation network Climatological observation network Seismological observation network Meteorological satellites & climate satellites • Data processing and distribution
3
GLOSSY | 12 juni 2013
The playing ground • KNMI operates in international networks: WMO, EUMETNET, ESA, NASA, NOAA, EUMETSAT, EU • Strong involvement in (inter)national research programmes. • Future & present developments: Data services (INSPIRE); 2D visualisation by webservices; interoperability GIS: almost all KNMI data have a geospatial component. 3D visualisation High resolution models Next generation sensors (3D information)
4
GLOSSY | 12 juni 2013
“KNMI is an information machine” Measurement / model data
300 GB/ day
KNMI
Knowledge adding
180 GB/ day
Value-added information 5
GLOSSY | 12 juni 2013
Extern rekenen
KNMI ICT infrastructure KNMI- WAN
•Internet •RMDCN •VenWnet •Nafin
Cabauw Eelde
Schiphol
Externe verbindingen
16hoven Den Helder
Beek
firewall Werkstation s 150 werkplekken
Pc’s 300 werkplekken
Internet & intranet server
Computercenter
Mass storage
6
Supercomputer GLOSSY | 12 juni 2013
High performance Datacommunication Servers
8
Radar Radar
7
GLOSSY | 12 juni 2013
Meteorological satellites
8
GLOSSY | 12 juni 2013
Scientific Satellites
9
GLOSSY | 12 juni 2013
Observation network
10
GLOSSY | 12 juni 2013
Web services for viewing & download
11
GLOSSY | 12 juni 2013
Interpolation Constructing maps from measurements
12
GLOSSY | 12 juni 2013
Open Data
13
GLOSSY | 12 juni 2013
Open Data: wat? Open data betreft data die: verzameld zijn in het kader van de uitvoering van een publieke taak; gefinancierd zijn met publieke middelen voor de uitvoering van die taak; openbaar beschikbaar zijn op grond van de Wet openbaarheid van bestuur (Wob); bij voorkeur voldoen aan 'open standaarden’; bij voorkeur door een computer kunnen worden gelezen.
(aangescherpt in nota BSR)
14 14
GLOSSY | 12 juni 2013
12 juli 2013
Open Data: waarom 1/2 Effecten voor de samenleving: Economische waardecreatie Vergroting transparantie overheid Betere dienstverlening aan burgers en bedrijven Effecten voor de overheid als geheel: Financiële besparing Standaardisatievoordelen Effecten voor organisaties: Financiële besparing Versterking van de legitimiteit Vergroting van de externe oriëntatie van de organisatie 15
GLOSSY | 12 juni 2013
Open Data: waarom 2/2 EU “Open Data” strategie waarvoor Europese Commissie eind 2011. heeft gekozen (herziening PSI directive, stimulering van de markt inrichting van pan-Europese open data portalen). EL&I heeft het kabinetsbeleid m.b.t. open data verwoord in de Digitale Agenda. BZK verwerkt open data in de Wob. Minister Schultz van Haegen: per 1 januari 2015 alle data van IenM beschikbaar voor hergebruik volgens het principe ‘open, tenzij’. 09/05/2013: “Obama Act”: “Obama Administration Releases Historic Open Data Rules to Enhance Government Efficiency and Fuel Economic Growth”
16
GLOSSY | 12 juni 2013
Open Data & KNMI • Voor 1 januari 2013 biedt KNMI datasets die momenteel al als open data worden aangeboden (klimaatproducten) conform IenM beleid aan (downloadbaar bestand + registratie in data.overheid.nl • Voor 1 januari 2014* biedt KNMI ook wetenschappelijke en realtime datasets (waarnemingen, model-, radardata) conform IenM beleid aan, in overleg met de afnemers van realtime data en (internationale) wetenschappelijke partners *tijdstip afhankelijk van inwerking treden nieuwe WOB
17
GLOSSY | 12 juni 2013
Open Data tijdlijn :
Start Open Data [klimaatdata]
KNMI monopolie als meteo-provider Nederland
Buienradar ‘verovert’ de markt Diverse weerproviders starten commerciële activiteiten in NL
WMO Resolutie 40: Definities voor Essential data en Non-essential data
1995
18
PSI directive
1998
2003 2006
GLOSSY | 12 juni 2013
Introductie vrije Data politiek
2009
2013
Open Data & Bronhouders Diverse bronhouders meteo- en klimaatgegevens: KNMI Collega ‘KNMI’s’: bijv. MetOffice, Meteo France, Deutsche Wetter Dienst Europese organisaties: bijv. ECMWF*, EUMETSAT*, ORFEUS* * ECMWF: European Centre for Medium Range Forecasting EUMETSAT: European Organisation for the Exploitation of Meteorological Satellites ORFEUS: Observatories and Research Facilities for EUropean Seismology
19
GLOSSY | 12 juni 2013
Open Data Distributiemodel databron = KNMI kerntaak
Outlet Open Data
> Via website & KDC
Outlet SLA
Opmerking: als de kerntaak wordt beëindigd, kan de databron komen te vervallen
20
-Beschikbaar ‘as is’ -Geen registratie -Geen kosten
Service Level Agreement: - Marginale kosten (integraal tarief) - Registratie - Algemene informatie-uitwisseling - Specifieke informatie-uitwisseling - Rapportages prestaties - Advies bij producten -Testomgeving > Via FTP & KDC
GLOSSY | 12 juni 2013
Richtlijn Markt en Overheid
Open Data & KDC • KDC kan “open” en “restricted” datasets aanbieden • Metadata in KDC is conform INSPIRE en NL Kernset (ISO 19115) • KDC metadata-catalogus zal komende maanden via Nationaal Georegister (NGR) gekoppeld worden aan data.overheid.nl • “Open” datasets zijn zonder registratie en kosten toegankelijk • Registratie is optioneel
21
GLOSSY | 12 juni 2013
Waarom een KDC Huidige KNMI data: Grote diversiteit aan onderwerpen (weer, klimaat en seismologie) Historisch, realtime en verwachtingen (modeldata) Onderzoek en operationeel Bruikbaar in vele toepassingsgebieden Maar: Moeilijk vindbaar Moeilijk bruikbaar Weinig standaardisatie Versnippering aan portalen Grote beheerinspanning 22
GLOSSY | 12 juni 2013
Hoe ziet het eruit?
data.knmi.nl
23
GLOSSY | 12 juni 2013
Publish
24
GLOSSY | 12 KNMI juniData 2013Centrum | 14 december 2012
Find
25
GLOSSY | 12 KNMI juniData 2013Centrum | 14 december 2012
Bind
26
GLOSSY | 12 KNMI juniData 2013Centrum | 14 december 2012
Bind
27
GLOSSY | 12 KNMI juniData 2013Centrum | 14 december 2012
Bind
28
GLOSSY | 12 juni 2013
Find 29
GLOSSY | 12 juni 2013
Bind
30
GLOSSY | 12 KNMI juniData 2013Centrum | 14 december 2012
Bind 31
GLOSSY | 12 KNMI juniData 2013Centrum | 14 december 2012
Wat zit er al in KDC • • • • • • • • •
Temperatuur en neerslag uit de klimaatatlas Scatterometer (wind boven zee) NL Radar composiet/volume Europese stationsreeksen (EOBS ECA&D) Multi sensor reanalysis van ozon OMI wolken/ozon/aerosolen Meteosat Second Generation fysische producten EC-Earth model data etc.
KDC is groeiende in datasets en functionaliteit 32
GLOSSY | 12 juni 2013
Ruimtevaart / ESA
33
GLOSSY | 12 juni 2013
Ruimtevaart / ESA • KNMI activiteiten – Atmosfeermissies (Sciamachy, OMO, TROPOMI, Premier, Earthcare) – Scatterometer (wind boven zee: ERS, ASCAT). – Meteo: MSG, Metop • KNMI governance – Eumetsat – Mission Advisory Groups (MAG’s) – FP7 / Horizon 2020 - ESA - Data Operations Scientific Advisory Group (DOSTAG) - Programme Board Earth Observation (PB-EO) ($/€)
34
GLOSSY | 12 juni 2013
Ruimtevaart / ESA • Data Operations Scientific Advisory Group (DOSTAG) – NL delegatie: » Jasper van Loon (NSO) » Avri Selig (SRON) » Raymond Sluiter (KNMI) • Programme Board Earth Observation (PB-EO) Eumetsat – NL delegatie: » Joost Carpay (Delegate; NSO) » Raymond Sluiter (Advisor; KNMI) • Input via NSO & delegates
35
GLOSSY | 12 juni 2013
SCHEDULE FOR DOSTAG 75 / 23-24 APRIL 2013, ESRIN
Version 17 April 2013 23-4-13
24-04-13
BRIEFING: 23 April 2013, 8:45, Room L (Mercator) Item
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19
20 21 22 23 24 25 26 27 28 29 30 31
Draft Agenda Feedback from PB-EO 150 Review of actions EOEP Part B: STSE EOEP Part B: DUE EOEP Part B: VAE EOEP Part B: SEOM Coffee EOEP Part C: MOM EOEP Part C: GSD Swarm Earthnet & LTDP Lunch EO Campaigns GSE CCI GSC Sentinel-3 Coffee GS, DA and Pre-Ops Revised GSC LTS AOB Reception DAY 2 EOEP Part A: EOPA & EWD EOEP Part A: IPD EE 8 ADM-Aeolus EarthCARE Coffee MTG Fuegosat Sentinel-1 Sentinel-2 Sentinel-4 Sentinel-5P 36 Jason-CS Lunch
Doc Nr
OJ75 / / 22 22 22 22
Presented by
Alexander Soucek Chairman Alexander Soucek Diego Fernandez Marc Paganini Stephen Coulson Y.-L. Desnos
23 23 25 20
Laur et al. Mirko Albani Yvon Menard Hörsch, Albani
/ 28 30 31 34
Malcolm Davidson Mark Doherty Mark Doherty Giancarlo Filippazzo Bruno Berruti
38 / /
Pier Bargellini Antonio Ciccolella Alexander Soucek
21 21 / 24 26
Pierluigi Silvestrin Roland Meynart Yaskja Meijer Anders Elfving Alain Lefebvre
27 29 32 33 35 36 37
TIMING
9:30-9:35 9:35-9:40 9:40-9:45 9:45-10:05 10:05-10:20 10:20-10:40 10:40-10:55 10:55-11:15 11:15-12:00 12:00-12:20 12:20-12:40 12:40-13:00 13:00-14:30 14:30-15:15 15:15-15:25 15:25-15:45 15:45-16:05 16:05-16:25 16:25-16:40 16:40-17:00 17:00-17:45 17:45-18:00 18:00-18:30
9:00-9:30 9:30-9:45 9:45-10:30 10:30-10:50 10:50-11:10 11:10-11:30 Donny Aminou 11:30-11:50 Jörg Callies 11:50-12:00 Ramon Torres 12:00-12:20 Francois Spoto 12:20-12:40 Hendrik Stark 12:40-12:55 Kevin McMullan 12:55-13:10 GLOSSY | 12 juni 2013 Richard Francis 13:10-13:25
Early AM
Late AM Early PM Late PM
Early AM
Late AM
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19
20 21 22 23 24 25 26 27 28 29 30 31
Early PM
Late PM
37
GLOSSY | 12 KNMI juniData 2013Centrum | 14 december 2012