Adresser les besoins métiers et Big Data avec une approche Scale out NAS

Transcription

1 Vincent DOUCEY (EDF) Pôle Ingénierie Gestion de Données (PIGD) Expertise Stockage et sauvegarde Adresser les besoins métiers et Big Data avec une approche Scale out NAS

2 SOME FIGURES 2 2

3 OBJECTIFS Performance Implement the latest generation of hardware for reduce cost, delay 4 GOALS Development IAAS Provider (EDF Group) Agility Automate and simplify processes to provide a service in minutes (Time to market) Security To change the security policy because of the opening of the SI, the new threats. Adjust policy to the needs of applications 3

4 LES BESOINS DE L INGENIERIE NUCLEAIRE EN QUELQUES CHIFFRES 1 Cluster de calcul 1 Po de données 70% de données de calcul 30% de données bureautiques Utilisateurs 100% de postes SciBian (Debian) 4

5 OBJECTIFS Passer d une solution obsolète à une solution innovante couvrant un ensemble de besoins variés de stockage Dans le cadre dans renouvellement du stockage d un cluster de calcul et de partages bureautique avec des exigences de performance, de disponibilité, de sécurité et d efficience des coûts Lancement du projet SSSv2 mi

6 D un système en silo vers l agilité Limites de l ancien système Cibles du nouveau système La solution ne permettait pas d implémenter les protocoles nécessaires pour répondre aux enjeux nouveaux de sécurité (contexte réglementaire) Il n était pas possible de travailler de façon agile et évolutive avec un «single namespace» Les performances étaient insuffisantes PRA à usage unique Répondre aux exigences nouvelles de sécurité du SI (NFSv4+Kerberos+encryption AES256) Evolution de performance et de volumétrie au travers d un single namespace Répondre aux exigences de disponibilité via la mise en place d un PRA Répondre via une même solution à différents besoins de stockage 6

7 Isilon Scale-Out Architecture NFS SMB HTTP FTP HDFS for Hadoop REST for Object 10 Gig-e Network Multi-Protocol Compute Layer Ethernet Layer OneFS Operating Environment Intra-cluster Communication 7

8 LE PROJET SSSv2 L objectif de ce projet était la mise en place d une solution de stockage évolutive, multi-usages, fiable et sécurisée Cette plateforme répond aux exigences suivantes : Performance : Amélioration des performances du stockage pour répondre aux besoins du cluster de calcul scientifique et des partages bureautique Fiabilité : Intégration des contraintes de sécurité du SI Scientifique Disponibilité : De la solution au travers d un PRA Agilité : Evolutivité dans le temps en terme de volumétrie, de performance et d usages 8

9 PLANNING Expression du besoin Scientifique/ Lancement du projet SSSv2 Lancement de la commande / ISILON Intégration / Fin d intégration au SI Scientifique Bascule / Migration des clients de l ancienne solution vers ISILON Version / Recette de montée de version Version / Recette de montée de version Mai 2015 Juillet 2015 Novembre 2015 Janvier 2016 Février 2016 Décembre 2016 BUILD RUN o o o REX Réponse aux besoin via une solution simple Les efforts d intégration et d architecture très réduits. Accompagnement très utile d EMC² sur 6 mois 9 o o REX Equipe d exploitation ne rencontrant pas de difficultés majeures Mises à jour des plateformes transparentes : un nœud à la fois (impossible auparavant). o MCO : l infrastructure n est plus un «lourd fardeau» car un «single namespace» o Niveau de service meilleur que prévu : performance, disponibilité (RPO <15min).

10 SYNTHÈSE Des marges économiques dégagées sur l exploitation simplifiée. Upgrade de l infrastructure en performance ou volumétrie très facile (ajout de noeuds). PRA avec RPO<15min même avec une grosse volumétrie Respect des exigences de sécurité Ouverture vers d autres champs d applications : Hadoop, Big Data, Datalake 10

11