Accès aux données Sentinelles

Transcription

1 Accès aux données Sentinelles Hervé Jeanjean - CNES Ministère de l'écologie, du Développement durable, et de l Énergie

2 Contexte Un changement de paradigme majeur Big data : explosion du volume des données (3 V: volume, vélocité, variété) 20 Po de données en 2020 à l ESA, 20 Po de données déjà en ligne sur Google Earth Engine COPERNICUS : 4 To/jour Sauts et ruptures technologiques (loi de «Moore», capacité de stockage, internet et Web 2.0, Cloud ) Accès aux données qui se démocratise: «open data»

3 Big data Big data = big challenge Enjeu quantité de données générées par les sentinelles, mais ses conséquences : structuration & gestion des données accès & dissémination analyse The problem is not that our sensors produce too much data; the problem is the structure of the data and how we manage it. Defense Advanced Research Projects Agency Adaptive Execution Office Irruption des acteurs majeurs du Cloud

4 Vers un changement de paradigme 4

5 Vers un changement de paradigme Workshop ESRIN Big data : Data and computation in the same room! (E. Parsons, Google) 5

6 Google Earth Engine Google Earth Engine platform is a system designed to enable petabyte-scale, scientific analysis & visualisation of geospatial datasets. Slides presented by Google at ESA Big Data Workshop

7 Circulation des données sentinelles Circulation interne (2,5 Gbit/s) Circulation entre une quinzaine de nœuds internes (PACs, CGSs, MPCs, PDMC) Réseau de dissémination externe des données (jusqu à 5 Gbit/s) avec nœuds de distribution (basés sur des éléments du segment sol de base) nœuds de réception dédiés localisés principalement en Europe pour les utilisateurs «privilégiés» COPERNICUS (6 core services COPERNICUS + centres dédiés à définir)

8 Un constat sans appel les fonctions de base (core) du segment sol de l ESA ne pourront pas satisfaire les besoins de masse des utilisateurs «anonymes» Le secteur aval utilisera les produits des services de base GMES, mais aura aussi besoin de remonter aux produits Sentinelles pour développer d autres produits Les services de base GMES n ont pas prévu de diffuser massivement les produits Sentinelles Seuls les services de base GMES et certains points d entrée nationaux auront un accès privilégié aux produits Sentinelles Le secteur aval COPERNICUS risque donc d être le grand perdant de l architecture «core» d accès aux produits Sentinelles

9 Face à ce constat, que faut-il faire? Besoin de mettre en place un accompagnement au niveau national pour booster le développement du secteur aval en développant des initiatives aux interfaces entre le niveau européen et le niveau régional/local Accès garanti aux produits sentinelles pour les utilisateurs français Capacités de traitement au plus près de la donnée Collaborations national/régional Valorisation, sensibilisation, formation Partage d outils et mutualisation de moyens

10 Un premier verrou à faire sauter

11 Les signaux sont au vert, n attendons pas

12 Objectifs de la plateforme PEPS Assurer la dissémination au niveau national des données Sentinelles en s appuyant sur des relais en Régions Fournir des capacités de traitements au plus près de la donnée PEPS doit compléter le dispositif des services de base Copernicus et faciliter la mise en place de services aval en permettant le développement industriel et la compétitivité des entreprises

13 Le chaînon manquant accès limité! Europe National Régional, local

14 Conclusion Accès aux données spatiales Données contributrices : problème de licence, pas de «tuyau» missions commerciales : achat groupé de licences pour les services Copernicus (redistribution aux services nationaux possibles si licence multiple) coordination par l ESA autres : données météo (accès via Eumetsat), données missions R&D Sentinelles : problème de «tuyau», pas de licence! Schéma «traditionnel» de traitement et distribution développé par l ESA (PACs) Risque de saturation du réseau pour l accès aux points de distribution! Nouveau paradigme Big Data associé aux technologies du Cloud Nouveau concept de plateforme d accès à l étude (PEPS) Cadre collaboratif atelier le 18 novembre 2013 à Paris