13 Mars 2015
oct-07 janv-08 avr-08 juil-08 oct-08 janv-09 avr-09 juil-09 oct-09 janv-10 avr-10 juil-10 oct-10 janv-11 avr-11 juil-11 oct-11 janv-12 avr-12 juil-12 oct-12 janv-13 avr-13 juil-13 oct-13 janv-14 avr-14 juil-14 oct-14 1400 1200 1000 800 600 400 200 0 CAPARMOR phase 3 CAPARMOR phase 2 CAPARMOR phase 1 Milliers Heurs
Définition des besoins scientifiques. Animateur Pierre Garreau Composition: IFREMER, IUEM,SHOM, ENSTA Bretagne, Ecole Navale, IRD et Pôle Mer Bretagne Participants : des utilisateurs et des informaticiens issus de services communs ou de labos
Remplacement de la machine Caparmor Rester au niveau d un «mésocentre» (budget constant) Introduire des critères de performances en accès disque (problématique BigData) Permettre de créer un environnement de R&D associant des chercheurs en sciences marines et des spécialistes des STIC
Base de données Coriolis/physique CERSAT : données spatiales Données des campagnes océanographiques Système d information halieutique Données d environnement côtier Portail & infrastructure de données géographiques
SGBD relationnel ORACLE : catalogues, données ponctuelles (in-situ), méta-données (10 milliards d enregistrements) Stockage disque (fichiers à plat) : données image (~700To de disque) Système d archivage pérenne : sécurité des données patrimoniales (~800To d archives) Cluster de portails WEB virtualisés
Augmentation régulière du volume des données due à : L automatisation des système d observation Les progrès technologiques sur les capteurs La récupération de données d opportunité Pour certains traitements, les accès disque sont devenus le facteur limitant
Finalité «sciences marines» partagée entre les partenaires Proximité «réseau» des données marines Filière de PMEs sur ce domaine Au niveau national : pôles de données d observation de la terre Pôle de données «océan»
Cluster/grappe stockage Performant visualisation, services Web,.. Cluster/grappe de calcul Cluster/grappe Stockage des Données de Référence /ref/ Cluster/grappe Stockage Permanent /home/ Cluster/grappe Stockage «lower cost» /data/ Cluster/grappe Stockage «De travail» /scratch/
25,0 Apply 50% augumentation 20,0 Po 15,0 10,0 A: 1,6Po B: 1,9Po A: 3,1Po 5,0 0,0 2015 2016 2017 2018 2019 2020
Scientifiques (pilotage scientifique) Professionnels (mission et financements Ministériels ciblés) Startup/PME (pilotage pôle mer?) notamment pour la partie calcul
Etablir une convention d exploitation avec les collectivités territoriales But : définir les parts respectives de la recherche/activités publiques d une part et des PME d autre part Etablir des conventions avec : le pôle de compétitivité Mer Bretagne et les PME les établissements partenaires/utilisateurs
Comité de pilotage scientifique définit la politique de partage des ressources (calcul/traitement, stockage, ) délègue au Pôle de compétitivité la gestion d un Comité de pilotage «entreprise» avec une autonomie de décision
Calcul/traitement : essentiellement paramétrage des outils de scheduling de la configuration Stockage : Validation du statut de «données de référence» Arbitrage des demandes d espaces disques Espace sauvegardé Espace pour diffusion Web/ftp/autres Espace de travail (scratch, lower cost, ) autres
Projet Datarmor en voie d acceptation En 2016 : o achat/installation de la machine o Travaux de logistique pour alimentation électrique et système de refroidissement o Doit permettre de démonter Caparmor en 2016 o 2017-2020 budget annuel pour upgrade
Pour une installation en 2016, il faut donc armer un appel d offres dès à présent Appel d offres avec «dialogue compétitif» (en 2 phases) On s adresse à des «intégrateurs» capables de tout mettre en place (1 seul lot) Une tranche ferme, puis des tranches optionnelles
Programmes «test» fournis aux candidats pendant l appel d offres Ils devront s engager contractuellement sur des niveaux de performance Appel à propositions de benchmarks par les utilisateurs
Phase 1 : cahier des charges fonctionnelles chiffrages approximatifs des volumes laisser les candidats proposer des solutions ouvertes Dialogue compétitif : affiner la solution avec les meilleurs candidats Phase 2 : cibler des technologies et des quantifications précises avec un nombre restreint de candidats
Time Line