SPIRALES 2013 Etude de faisabilité NEOTEC Spirales 2013 Rédaction : Laurence AUDIN, Laurent TORLAY et Stéphane DEBARD Partenaires : Equateur (IG), Pérou (INGEMMET), IRD France (Isterre-OSUG) Calendrier 2013: Approbation le 2013-03-27 3 visioconférences DSI 1 test à l OSUG Juillet 2013 1 mission en Equateur Novembre 2013 Budget 2013: Spirales 5k LMI Séismes et Volcans 1.5k PPR RIVIA 6k 18/03/2013 Page 1 sur 15
Introduction Ce document est une étude de faisabilité pour le projet NEOTEC, présenté par Laurence Audin à Spirales 2013. L objectif de ce document est de détailler le budget, le calendrier et les choix techniques finalisés (car discutés tout au long de l année 2013 pour permettre la réalisation de ce projet dans l année 2014), ainsi que ses perspectives d évolution à 5 ans. Cette étude de faisabilité est un livrable issu du projet SPIRALES 2013 qui a été financé à hauteur de 5k par SPIRALES et cofinancé par des demandes de soutien autres (soit 10.25k ). Ce document sera présenté au prochain comité SPIRALES 2014 pour le financement et la mise en œuvre du projet final si financement en 2014. Nous proposons le déploiement des données compilées sous ArcGIS pour une visibilité maximale, sur un site «Cloud», soutenu pour l implémentation et les données lourdes par des serveurs locaux. La philosophie est de mettre à disposition en Open Data 1 l ensemble des données publiées et validées sur un support serveur web GIS (ArcGIS ONLINE) pour les failles actives (format SHP, et Meta data) sans domiciliation nationale des données publiées. En soutien, sur les sites physiquement hébergés chez le partenaire ne figureront que les données annexes «lourdes» en terme de bande passante (format PDF et RASTER) qui participeront a l implémentation du site pour les années suivantes et comme plateforme de travail à distance entre les intervenants du comité scientifique. 1 http://fr.wikipedia.org/wiki/donn%c3%a9es_ouvertes 18/03/2013 Page 2 sur 15
SPIRALES 2013 Résumé des objectifs et les apports du projet NEOTEC La diffusion et la pérennisation d une base de données unique et disponible de façon interactive pour la première fois à l échelle de tout le continent Sud Américain. La gestion centralisée des ces données validées sur un serveur cloud pour neutralité de sites chez les partenaires multiples. Interactions Sud/Sud et Sud/Nord. Renforcement des acquis et des capacités. Transfert de compétences et de produit, le support technique construit pour Neotec intéresse nos partenaires pour ré utilisation. Effet levier multiple: o à la fois pour d autres groupes et la publication de leur données o pour future appropriation de l outil par nos partenaires aux Sud autant que par nos collègues IRD : Bases thermo-chronologiques, sismicité historique, volcans actifs, géodésie.). Apport de co-financements car intérêt des partenaires de se réapproprier l outil Publications internationales GSA Today etc, nationales avec les partenaires (Boletin de la Sociedad Peruana de Geologia, Page Web IG Quito), sur sites web de la DSI, Sciences au Sud, sur site web des Représentations IRD Pérou et Equateur, conférence ESRI. La demande à SPIRALES 2014 Appui à une équipe scientifique IRD (ISterre et OSUG) et à ses partenaires INGEMMET (Pérou) et IG Quito (Equateur) pour l installation et la présentation au Pérou Formation de nos partenaires Equatoriens à la gestion de serveur SIG pour leur service de cartographie et diffusion de données online. Installation de NEOTEC, et formation aux outils ArcGIS Online et NEOTEC au Pérou Demande de soutien DIC pour portail d entrée : Interface web, pour positionnement du projet en amont du GIS Online 18/03/2013 Page 3 sur 15
Etat$des$lieux$ 1.1 Les$besoins$:$qui&fait&quoi&?& Nous avons défini deux niveaux de compétences. L aspect scientifique relèvera d un comité scientifiqueetl aspectproductionrelèverad uncomitétechnique. Responsabilités AdministrationTechniqueAT#:#pour#la#production a. enfrance:l.torlay(osug) b. aupérou:h.castro(ingemmet) c. enequateur:j.aguilar(igoepnquito) BESOIN:Formerleresponsabledel administrationtechnique:pasdebesoinspourlafranceetle Pérou, mais besoin affiché du partenaire Equatorien, Jorge AGUILAR qui souhaite effectuer sa formation en commun avec Hugo CASTRO au Pérou et en profiter pour visiter la plateforme techniquegisdel INGEMMET AVANTAGE:L uncommel autredesmembresdel ATpeutimplémenteretgérerl améliorationdela base.avec3personnes,onassureuneformedepérénitéà5ansetunestabilitédudispositifetde l administrationtechnique. ComitéscientifiqueCS#:#pour#l implémentation#et#l évolution#du#projet#open#data d. enfrance:l.audin(irdoisterre) e. aupérou:c.benavente(ingemmet) f. enequateur:a.alvarado(igoepnquito) BESOIN:pasdebesoinparticulierdeformation,les3acteursscientifiquesduprojetcollaborentet publientensembledepuisplusde5ans AVANTAGE: La plateforme technique permettra sur une couche éditable en accès restreint d implémenter la base de données actuelles avec de nouvelles données et de discuter de leur validation sur une plateforme commune sans passer par une communication non pérenne ( mail, crashordinateuretautreproblemedecompatibilitédeprogrammes). 18/03/2013 Page 4 sur 15
Taches AT N importe lequel des responsables de l administration technique (avantage de la pérénité du projetencasdedépartdel und entreeux Administrerlesdonnées Décrirelesmétadonnées AdministrerNEOTECauniveausystème:pasdebesoinsdemaintenancespourlecloud( avantage) MaintenirlesiteWebetl interfacegraphique:pasd évolutionparticulièreenvisagée Superviser(espacedisque,accèsréseau ):AT Sauvegardes,restaurations:OSUG,centrededonnée Taches CS Corrigerlesdonnées,puislesvalidersurlaplateformedetravailenaccèslimité VALIDERlesdonnéesàbasculersurlesiteouvert Publierlesinformationsannexes(Publicationsetcartes) Diffuseretvulgariser Capacités à mettre en œuvre pour le serveur CLOUD UploadsurArcGISserveurdelabasededonnéesNEOTEC Accèslibrepourtousendéchargementpartieloutotal Possibilitédetridesinformationssurleserveurendirect SuperpositiondedonnéesadditionnellestypefluxRSSdelasismicitéà7joursUSGS FondsESRItopographiqueetBingMaps FondsESRIimagerie Besoins pour les serveurs ArcGIS 1ArcGisserveurauPérou(DISPONIBLE,propriétédel INGEMMET) 1ArcGisserveurenEquateur(DISPONIBLE,propriétédel IGQuito) 1BackupsurlecentrededonneesOSUG(DISPONIBLE,propriétédel OSUG) Gestion$autonome$par$site,$pas$de$besoins$de$maintenance$à$signaler$pour$NEOTEC$ 18/03/2013 Page 5 sur 15
1.2 L Existant$et$sa$mise$en$forme$pour$publication$online$ Les métadonnées et les données. Les données sont compilées et validées sous ArcGIS avec une légende et des documents annexes (PDF et RASTER, libres de droit). Nous souhaitons les mettre en ligne sur un serveur web, cloud; implémentable depuis trois sites, en Equateur, au Pérou et à l OSUG en France. Un couple chercheur, ingénieur GIS est défini sur chacun de ces sites. Listes de données existantes (et formats) qui devront intégrer l outil : 1. Shapefile (Points et lignes géo référencées (sous format SHP Arcmap et KML Google earth), liés à des fichiers texte.pdf + tableaux en format ArcGIS ou Excel) 2. Fichiers PDF de publications libres de droit 3. Symboles et légendes 4. Fonds topographiques gratuits disponibles pour toutes les solutions 5. Images RASTER pour les données d'imagerie géoréférencées (photos satellites, aériennes, topographiques,...) Format HDR, MrSid, Geotiff,... 1.3 Technique$et$le$matériel$ 1. Utilisation#d un#outil#déjà#existant## Comme cela a été préconisé lors de la commission Spirales 2013, une analyse du système d information AMMA-CATCH et autres a été effectuée. Nous en avons conclu qu il n y a pas de lien possible ou de réutilisation d AMMA-CATCH ni de ressource ou solution issues d autres projets Spirales. Les fonctionnalités et les objectifs de notre projet sont très différents à plusieurs niveaux du système : - Lesfonctionnalités(ex:vérificationsdestéléchargements,desdonnéesenaccèsrestreints, gestiond annuaired utilisateur,donnéesentempsréel,administrationquotidienne,gestion distante ou locale, positionnement cloud apolitique ) - Les moyens - ressources humaines - ex: nécessité d une administration aigues du serveur AMMA CATCH. - 18/03/2013 Page 6 sur 15
SPIRALES 2013 2. Moyens techniques mis à disposition pendant létude de faisabilité Les licences ESRI ArcGIS Server : Une disponible, version professionnelle à l OSUG. Une disponible, version professionnelle (edu) à l IG Equateur. Une disponible, version professionnelle à l INGEMMET Pérou. Les licences ESRI ArcGIS Online: Nos partenaires ne disposent pas de licence ArcGIS Online. Aucun des sites. Les deux partenaires souhaitent se former au Pérou dans le cadre d une formation commune au Pérou en 2014. Une licence ArcGis Online est disponible à l OSUG, et nous a été fournie gracieusement pour tester le prototype à Grenoble. Des discussions sont en cours avec ESRI au niveau national et international au Pérou pour déterminer la solution la plus simple, a priori l idéal serait l achat par l IRD DSI d une licence de site ArcGIS Online ou de deux licences individuelles à fournir à nos partenaires pour 1 an, ce qui permettrait l installation de la base et de démontrer la nécessité de l investissement pour eux à plus long terme. Choix du plateau logistique pour l environnement des tests L utilisation d un outil construit sur la base d ArcGIS Online, solution modifiable «clé en main»: Afin$de$ne$pas$être$contraint$par$une$ lourde$charge$ technique$ et$ fonctionnelle$ dès$ que$ l outil$ NEOTEC$ sera$ opérationnel,$ il$ est$ préférable$ de$ s orienter$ vers$ des$ solutions$ logicielles$ clé$ en$ main,$nécessitant$un$investissement$humain$à$moindre$coût$pour$le$futur$du$projet$(en$terme$de$ maintenance$pour$les$5$prochaines$années,$stabilisations$des$codes$sources$et$développements$ de$fonctionnalités$adaptées,$ ).$Une$analyse$des$fonctionnalités$des$solutions$ ArcGIS$Server $et$ ArcGIS$ Online $ a$ été$ effectuée$ afin$ de$ disposer$ d une$ adéquation$ entre$ les$ fonctionnalités$ existantes$et$déjà$implémentées$dans$l outil$et$les$besoins$du$projet$neotec.$ D autres solutions ont été explorées pour le Cloud : plusieurs options, dont gratuites ou payantes, mais non stables, peu maintenues etc (QGIS, ). 18/03/2013 Page 7 sur 15
1.1 Comparatif ArcGIS Server et ArcGIS Online (Cloud). Un comparatif des solutions choisies a été effectué afin de proposer un choix définitif. Ce comparatif propose 1 choix final sur la base des perspectives techniques et financières envisageables pour le déploiement de NEOTEC. 1. Problèmes rencontrés et solutions proposées L un des problèmes majeurs rencontrés était lié à la portabilité des légendes (symbology) sous ArcGIS Online. Les échanges avec le support d'esri au sujet du portage de la symbologie n ont pas permis de résoudre le problème sur ArcGis Online pour le moment. Avec ArcGIS Online, les limitations actuelles sont importants, seule une légende simple type trait de couleur est possible. Nous pouvons détourner ce problème et le résoudre en important une symbologie hébergée sur un serveur physique. En effet, il est de toute façon obligatoire de sauvegarder l architecture de la base et le site web sur un serveur physique en cas de problème sur le cloud. Nous avons opté pour une sauvegarde sur les serveurs du centre de données OSUG, qui est d accord pour hébergé cette opération. Avec ArcGis Server, on peut transférer une symbologie via ArcMap mais dans le cas "Unique values, many fields", il est typiquement nécessaire de créer un nouveau champ avec les TIPOESTRUC & EDAD & ACTIVIDAD et de reprendre la symbologie pour pouvoir se ramener à "Unique values". Cette solution est satisfaisante et unique. 18/03/2013 Page 8 sur 15
SPIRALES 2013 2. Les tarifs et les licences Les solutions logicielles: Les outils ArcGIS Server et ArcGIS Online sont payants et chacun dispose de solutions tarifaires différentes. Ces solution sont été explorées afin d adapter le choix aux besoins du projet : - L outil ArcGIS Server: Il existe au sein des Instituts de recherche en France un système d achat de Licence de site Education/Recherche. Elle l offre aux agents de ces structures et aux partenaires l accès à l ensemble des licences de toute la gamme ESRI (ArcGIS Server, ArcGIS Desktop, ). L IRD et l OSUG disposent chacun de licences. Nos partenaire de l IG et de l INGEMMET aussi. - L outil ArcGIS Online: Elle est disponible à l OSUG pour infos ArcGIS Server edu/ recherche prix 2000 euros: 5 utilisateurs / 1000 crédits, 600 euros (Avantages: pas d'obsolescence, mise à jour auto (etc.). Ce coût parait raisonnable pour l année 2014 pour les deux sites partenaires et il est envisagé de couvrir l achat par l intermédiaire d ESRI France pour pouvoir porter ces licences chez nos partenaires Equatoriens et Péruviens dans le cadre des conventions actives IRD. Seul, l OSUG dispose pour l instant d une licence active. Plusieurs options se présentent pour le futur, dont l investissement par SPIRALES à travers la DSI dans 2 licences supplémentaires à fournir à nos partenaires : Cout 2000 euros par licence. Si upgrade : 50 utilisateurs / 2500 crédits, niveau 2... 1200 euros par an, remis à zéro chaque année, non reportables d une année sur l autre. Possibilité d achat en Bloc de 1000 crédits : 200 euros, reportables. 18/03/2013 Page 9 sur 15
2. Architecture$et$Stratégie$de$déploiement$du$projet$NEOTEC$ 2.2 Architecture$technique$$ Application'Web' Interfacedeconsultation desservicesgishébergés Bibliothèquededocuments FluxRSS ServiceGIS ServiceGIS ServiceGIS ArcGis'Online'(cloud)' Faillesactives Cataloguedesismicité ArcGis'Server'(Peru)*' Raster Couchesdetravail(privées) ArcGis'Server'(Ecuador)**' Raster Couchesdetravail(privées) Sauvegarde ArcGis'Server'(France)***' Faillesactives Cataloguedesismicité Prototypagede fonctionnalitésnouvelles Comitétechnique: *:ArcGisServer10.1,XEON2,66GHz,24GbRAM,64bitsWindows2008ServerR2 **:ArcGisServer10.1,XEON2,5GHz,4GbRAM,64bitsWindows2008Server ***:ArcGisServer10.2,VirtualisationKVM,Mémoireajustable,64bitsWindows2008ServerR2 Ingemmet:HugoCastro IG\EPN:JorgeAguilar OSUG:LaurentTorlay 2.3 Stratégie$de$déploiement$ Les environnements de tests : ArcGIS Online et/ou ArcGIS Server L hébergement test a été effectué et mis en place sur le site de l OSUG et de l IG Equateur pour le test du prototype en Novembre 2013. L hébergement pour le Pérou fera l objet de la mission 2014 au Pérou à l INGEMMET qui dispose de pré-requis d infrastructure solide (Cf. annexe). 18/03/2013 Page 10 sur 15
SPIRALES 2013 $ Animation$du$projet$ Afin de disposer de toutes les informations et ceci avec les partenaires actuels (IG et INGEMMET) futurs utilisateurs, une mission Equateur a été programmée et effectuée en Novembre 2013 afin d effectuer plusieurs actions: - Présenter l étude de faisabilité et la faire valider par nos partenaires - Etablir un contact fonctionnel et technique avec les partenaires et administrateurs des services informatiques et serveur GIS locaux. - Faire un état des lieux des interactions avec les distributeurs locaux pour disposer d éléments de discussion avec les fournisseurs de licences et de formations en France, en Equateur ou au Pérou. - Installer un prototype sur la base de celui installé à l OSUG afin d anticiper les tests d interopérabilité entre les deux serveurs pour la suite si nécessaire. Induire une initiative de partenariats d un point de vue financements à long terme du projet NEOTEC. Afin de répondre aux besoins de maintenance, de pérennité de l outil et d interopérabilité du système pour des perspectives de reproduire le même schéma vers d autres structures partenaires. Publications et communication en 2013 Geological Society of America, Audin et al., 2013, Active faults PMA. ONLINE. Le Projet Neotec a été présenté lors d un workshop OSU OEREME de Montpellier "base de données SIG" en Mai 2013 (http://www.oreme.univmontp2.fr) Le Projet Neotec a été présenté lors du kickoff Meeting de SARA Global de Bogota en (http://www.globalquakemodel.org), document pdf ci joint, C. Costa Le Projet Neotec a été présenté au Service de coopération scientifique et culturelle de l Ambassade d Equateur en Novembre 2013 3. Mise en œuvre de partenariats Nous avons discuté des partenariats avec ESRI France, ESRI Equateur et ESRI INC, avec l aide de S. DEBARD de la DSI. Il reste à finaliser les choix optimum en terme de dépenses budgétaires. Achat par la DSI, achat par le projet? 18/03/2013 Page 11 sur 15
$ 4. Risques$liés$à$la$mise$en$œuvre$de$l application$ La limitation en termes de qualité (seulement une partie de l info disponible?) de la portabilité de la base de données (par exemple pour la symbologie). Mais une solution viable est proposée. Les risques si l on ne fait rien : Que cela se fasse sans reconnaissance de l apport scientifique associé et des 40 ans d efforts couplés des partenaires de l IRD à l échelle de tout le continent Sud Américain. 5. Formations$et$montée$en$compétences$ - Participation a un congrès ESRI, USA 2014 et France - 1 Entrée gratuite par licence de sites (A la conférence USA ou France). - Esri Developer sur le Campus de l UJF pour l implémentation d autres widgets - Le soutien de la DIC pour la validation de l ergonomie du site web, et une demande de financement 2014 pour la version espagnole du site web. - Outils de développement pour coder et enrichir les solutions ESRI, en coopération avec H. Castro de l INGEMMET porteur de Geocatmin. - Transfert de l outil dans sa version finale aux partenaires pour ré-utilisation sur d autres supports et données " Contacts ESRI sur l'amérique du Sud, Equateur/Pérou Nous souhaitons organiser une formation en groupe constitué autour du projet sur demande des partenaires au Pérou en Juillet 2013, formation en espanol. Formation ponctuelle pour une à deux personnes à négocier mais peut être offerte par Esri France, solution moins intéressante pour nos partenaires. 18/03/2013 Page 12 sur 15
SPIRALES 2013 6. Evaluation$du$cout/Financement$prévisionnel$ Avantages, inconvénients, coûts (investissement, fonctionnement) des différents scénarios - Investissements actuels : " neotec-opendata.com pour 127,49 (10 ans) - Fonctionnement : avantages multiples validés suite pour programmation d une formation au Sud au Pérou. Décision discutée et validée suite à l estimation des besoins humains selon les sites de formation lors du test proto en Equateur. Calendrier$de$réalisation$ Le planning de l étude de faisabilité et du démarrage pour 2013 Mars 2013 : design et création d un portail web simple pour discussion du prototype avec la DSI Juillet 2013 : création du prototype à l OSUG et installation provisoire pour démo à nos partenaires 15 jours en Equateur (Novembre 2013) : évaluation des besoins et test du prototype sur site de l IG Quito Le planning prévisionnel de réalisation pour 2014 Mars 2014 : Finalisation des versions du sites Web, anglais et espagnol ( Français? ) Juin 2014 : Mise en ligne des légendes + 2 jours de travail sur le serveur L. Audin et L. Torlay 15 jours en Pérou (Juillet 2014) : formation et mise en place, disponibilité immédiate et finale des données publiées et validation de l accès restreint pour le comité scientifique 18/03/2013 Page 13 sur 15
$ 7. Perspectives$ d évolutions$ nécessaires$ pour$ la$ viabilité$ du$ projet.$ La visibilité scientifique est assuré pour 2014 et sur 5 ans par la poursuite des projets scientifiques par pays et les besoins croissants d estimation des aléas néotectonique et sismique pré figurés par GEM. La visibilité et la pérénité humaine est garantie par la création des deux comités scientifiques et technique. Qui permettront au projet de survivre au départ éventuel d un à 4 participants pour les estimations les plus pessimistes, notamment pour sa partie implémentation. - Interopérabilité de l application L application développée se doit être interopérable et reproductible vers d autres structures partenaires du projet, c est son but premier. Nos solutions techniques répondent à ces enjeux d Open Data multipartenaires. C est notre cas, les partenaires l ont déjà remarqué et intégré, pour l IG notamment qui souhaite réutiliser la solution pour d autres types de données du service géophysique de Quito ; et pour GEM qui souhaite bénéficier d un retour d expérience et de l outil Neotec si il est mis à disposition. En 2015 : livrer l outil à d autres pays qui en aurait besoin, Bolivie, Colombie, Venezuela etc 8. Prototype,$accessible$online$(à$finaliser)$ Installation d un prototype à l OSUG : http://neotec-opendata.com 18/03/2013 Page 14 sur 15
SPIRALES 2013 Annexe& 1&:& Spécifications& techniques& & serveur& hébergement& test& 1. SERVIDOR: PUBLICADOR GEOCATMIN ESPECIFICACIONES TÉCNICAS Marca Dell Modelo Power Edge M710HD Procesador Dos (02) procesadores Quad-Core Intel Xeon 2.66 GHz Memoria caché 12 MB, L3 Memoria RAM 24 GB, DDR3-1333, ranuras DIMM (módulo de 4GB) Disco Duro - Cantidad: 02 - Capacidad por disco: 140 GB SAS de 15k Hot Plug Memoria de video 8 MB Sistema operativo Windows Server 2008 R2 Standard Edition (en Inglés) Tipo de sistema Sistema operativo de 64 bits 2. SERVIDOR: BASE DE DATOS GEOCATMIN ESPECIFICACIONES TÉCNICAS Marca Dell Modelo Power Edge M710HD Procesador Dos (02) procesadores Quad-Core Intel Xeon 2.66 GHz Memoria caché 12 MB, L3 Memoria RAM 24 GB, DDR3-1333, ranuras DIMM (módulo de 4GB) Disco Duro - Cantidad: 02 - Capacidad por disco: 140 GB SAS de 15k Hot Plug Memoria de video 8 MB Sistema operativo Windows Server 2008 R2 Standard Edition (en Inglés) Tipo de sistema Sistema operativo de 64 bits 18/03/2013 Page 15 sur 15