Extension et optimisation électrique d'une plateforme de calcul haute performance. Lots n 1, 2 et 3

Transcription

1 CS Observatoire de la Côte d' Azur Établissement Public à Caractère Administratif Décret n du 19/04/1988 Boulevard de l'observatoire CS NICE CEDEX 4 Extension et optimisation électrique d'une plateforme de calcul haute performance. Lots n 1, 2 et 3 CAHIER DES CLAUSES TECHNIQUES PARTICULIÈRES (CCTP) Marché N MESO PROCÉDURE PASSÉE EN APPLICATION DES ARTICLES 33 3 al et 57 à 59 DU CODE DES MARCHES PUBLICS Date limite de remise des offres : le lundi 27 janvier 2014 à 12h00 Ce feuillet comprend 50 pages numérotées de 1 à 50. 1/50

2 Table des Matières ARTICLE 1 - PRÉSENTATION DE L'APPEL D'OFFRE Objet...5 ARTICLE 2 - CADRE D'ACCUEIL, EXISTANT Salle machine Emplacement du groupe froid Emplacement du groupe électrogène Le Cluster Cube...8 ARTICLE 3 - LOT n 1 (Ressources de calcul, agrandissement du cube, environnement logiciels) : LES BESOINS Introduction Contenu de la prestation Coût de fonctionnement Homogénéité Extension Nœuds de calcul Espace de stockage Nœud de login, de développement et d'administration Réseaux Administration à distance Environnement Logiciel Benchmarks Reprise du matériel obsolète Environnement, électricité, climatisation Climatisation Tolérance aux défaillances électriques Capacité électrique Sécurité incendie Connexion de l'extension du cube au cœur de réseau Services minimum attendus Installation Service après vente Documentation Formation Les travaux Contraintes Documents de Référence Contractuels Connaissance des documents contractuels Réglementation technique européenne Ordre de préséance Matériaux et produits hors domaine d'application des DTU Documents réglementaires à caractère général Coordination sécurité et protection de la santé sur les chantiers...22 ARTICLE 4 - LOT N 2 (Groupe électrogène) LES BESOINS Introduction Contenu de la prestation /50

3 Réglementations...24 Décrets...24 Lois...25 Arrêtés...25 Normes...26 Circulaires, instructions techniques et autres :...30 DTU Consignation Habilitation Identification du personnel Réunions Contractuelles Installation de chantier Balisage - Signalisation Consommations Horaires de travail Contraintes Documents de Référence Contractuels Connaissance des documents contractuels Réglementation technique européenne Ordre de préséance Matériaux et produits hors domaine d'application des DTU Services minimum attendus Responsabilité Obligations du titulaire Connaissance des lieux Réception des ouvrages Garantie Études Documentation Consigne d exploitation Plan de maintenance Essais sur site Formation...40 ARTICLE 5 - LOT 3 Mise en œuvre d un Plan de Reprise d Activité Contexte Objet du lot n 3 du présent CCTP et objectifs principaux Description de l existant Les services attendus Contenu de la prestation Baie de stockage du site principale Baie de stockage du site secondaire Fonctionnalité Compatibilité Architecture Évolutivité Logiciel d administration de la solution Plan de Reprise d activité (PRA) /50

4 Installation et mise en œuvre Transfert de compétence Maintenance-support Mise à jour...46 ARTICLE 6 - ASSURANCE...47 ARTICLE 7 - DÉLAI DE LIVRAISON...47 ARTICLE 8 - RENSEIGNEMENTS COMPLÉMENTAIRES /50

5 ARTICLE 1 PRÉSENTATION DE L'APPEL D'OFFRE 1.1 Objet L'Observatoire de la Côte d'azur (OCA) est un Établissement Public réparti sur plusieurs sites : Sophia Antipolis, Valrose, Calern et dont le siège social est situé sur le Mont Gros à Nice. Il héberge sur le site du Mont Gros un mésocentre de calcul intensif ( qui doit être étendu dans le cadre du Contrat de Projet État Région (CPER) 2007/2013. Ce centre est ouvert à tous les laboratoires de l'université de Nice Sophia Antipolis ayant des besoins dans le domaine du calcul intensif. Dans ce document, nous utilisons le terme «plateforme résultante» pour décrire la plateforme existante augmentée de l'extension dont cet appel d'offre est l'objet, le terme «plateforme existante» pour désigner le matériel existant hors extension et «nouvelle plateforme» pour désigner celui fourni dans le cadre de cet appel d'offre. Le but du présent appel d'offre est d'augmenter la capacité de calcul de la plateforme et de protéger les éléments critiques de la plateforme en cas de coupure électrique de longue durée. La plateforme résultante devra être homogène du point de vue de la connexion, de l environnement logiciel, du stockage et de l'administration. Par contre, il ne sera pas nécessaire que les calculs parallèles à mémoire distribués puissent être exécutés «à cheval» sur les nœuds existants et ceux de l extension. La plateforme résultante devra être facilement extensible dans les trois prochaines années, à savoir que des nœuds de calcul devront pouvoir être ajoutés et connectés au réseau de calcul et à l'espace de stockage sans qu'il soit nécessaire de revoir l'architecture ni d'investir des coûts trop importants au niveau de l environnement. Cet appel d'offre se décompose en trois lots, dont les deux premiers en tranche ferme, le troisième en tranche optionnelle liée à la faisabilité budgétaire. Les candidats peuvent soumissionner pour 1, 2 ou l'ensemble des 3 lots. Lot n 1 : l'acquisition des ressources de calcul (nœuds de calcul+réseau) ; l'agrandissement du «cube» où est actuellement hébergé le calculateur ; l'augmentation des capacités de refroidissement ; l'augmentation de l'espace de stockage ; la mise à niveau de l environnement logiciel de la plateforme résultante ; d'une manière générale, tous travaux et installations nécessaires (électrique) à la mise en production de la plateforme résultante. Lot n 2 : l'acquisition d'un groupe électrogène de capacité suffisante pour maintenir au minimum le besoin électrique de la plateforme de calcul et services annexes; 5/50

6 Lot n 3 : Mise en œuvre d'un plan de reprise d'activité : acquisition et configuration de la baie de disques de référence ou bien mise à niveau de la baie de référence, acquisition et configuration d'une baie de secours sur un site distant. Les candidats devront inclure dans leur offre tous les éléments nécessaires pour permettre la mise en production de la solution dans les délais impartis. Le site d'accueil devra être visité sur demande afin que la solution offerte y soit adaptée au mieux. Il leur revient de s'assurer que leur solution s'intègre dans le site d'accueil, notamment en ce qui concerne la consommation électrique, les contraintes liées au poids, aux arrivées d'eau, l accueil, le support et le branchement du groupe électrogène. L'ensemble de la solution devra être garanti pour une durée de 3 ans minimum à partir de la date d'admission du matériel telle que définie au Cahier des Clauses Administratives Particulières (CCAP). Des garanties plus strictes pourront être demandées, le cas échéant, pour les infrastructures. Des interruptions de service peuvent être envisagées pour l'installation et les éventuels travaux. Elle devront cependant être d'une durée raisonnable, planifiées et leur échéancier prévisionnel devra être présenté dans l'offre. ARTICLE 2 CADRE D'ACCUEIL, EXISTANT Il est recommandé de planifier une visite des lieux sur simple demande (voir «RENSEIGNEMENTS TECHNIQUES», page Erreur : source de la référence non trouvée). Attention : l'observatoire de la Côte d'azur sera fermé du vendredi 20 décembre 2013 au soir au lundi 6 janvier 2014 au matin. 2.1 Salle machine La grappe de calcul qui doit être étendue est installée sur le site de l' OCA situé Boulevard de l'observatoire, à Nice, au rez de jardin du bâtiment CION, dans la salle dénotée CIO 2 01 sur le plan reproduit dans l'annexe Erreur : source de la référence non trouvée, page Erreur : source de la référence non trouvée. Cette salle est située directement au dessus d'un vide sanitaire accessible. Son plancher peut supporter une charge de 600kg/m2. La plateforme de calcul est hébergée dans une structure de type «cube». Elle est séparée d'une autre salle machine (climatisée par un solution indépendante de type «bureau») par une paroi fine, et il faudra s'assurer que l extension pourra tenir dans l'espace disponible (ou, à défaut, intégrer les travaux nécessités par le déplacement de cette paroi. Son plancher peut supporter une charge de 600kg/m2. Un système anti incendie entièrement automatique à base de bouteille de gaz 6/50

7 inerte est en place. 2.2 Emplacement du groupe froid Le groupe froid est situé sur une plateforme (non montrée sur le plan) situé à côté de la paroi sud du bâtiment et sur laquelle il reste de la place pour une éventuelle extension. La tuyauterie utilisée pour assurer la circulation de l'eau entre le groupe froid et le cube passe par le vide sanitaire et doit pouvoir supporter une augmentation de débit. Le groupe eau glacée existant est de marque DAIKIN (modèle EUWA20KAZ). 2.3 Emplacement du groupe électrogène Le choix de la localisation du groupe électrogène n'est pas arrêté, le candidat devra proposer un site qui soit en accord avec les localisations des ressources de calcul, la configuration des installations électriques et qui tienne compte des nuisances (encombrement, esthétiques) quotidiennes (lorsque le groupe n'est pas actif) occasionnées par sa présence sur la vie quotidienne des agents présents sur le site. 2.4 Le Cluster Une copie des documents fournis par le candidat sélectionné pour la plateforme initiale et décrivant l'installation sont disponibles sur simple demande. À savoir l'offre retenue ainsi que le bon de livraison. En cas de divergence entre les deux documents, il faudra se référer au bon de livraison. Les points principaux sont les suivants: les nœuds de calcul sont reliés par un réseau dédié au calcul haute performance InfiniBand QDR ; une solution de stockage GPFS offre un espace de stockage utile de l'ordre de 200To auquel l'ensemble des nœuds de calcul accèdent de façon concurrente ; L environnement logiciel est de type HPC (High Performance Computing), il inclut tout ce qui est utile dans le cadre du développement d'applications parallèles l environnement de développement s'organise autour des compilateurs Intel (C+ +/C/Fortran) ; l'outil de gestion de job est OAR ; monitoring et déploiement sont basés sur des outils open source (dont Nagios, Ganglia etc.) Pour l'essentiel, les nœuds de calcul sont équipés de 2 processeurs Intel X5650 avec 48 Go de RAM. 7/50

8 2.5 Cube La plateforme de calcul est hébergée dans une structure de type «cube» à couloir chaud assurant le refroidissement des machines. Le cube est de marque APC, avec 4 armoires et deux refroidisseurs «in row». L'ensemble des paramètres physiques (température, humidité etc. peut être monitoré à distance et des alarmes sont configurées en cas de dépassement de seuil critique. 8/50

9 ARTICLE 3 LOT n 1 (Ressources de calcul, agrandissement du cube, environnement logiciels) : LES BESOINS 3.1 Introduction L'environnement, (dont le site d'accueil) est fourni «tel quel», le candidat devra prévoir, et intégrer l'ensemble des installations et travaux à entreprendre pour parvenir au résultat final Contenu de la prestation La prestation demandée comprend : les études préalables, notamment en ce qui concerne l'infrastructure du site et le refroidissement ; la livraison et l'intégration de l'extension de calcul et de stockage ; la mise à niveau, lorsque nécessaire, ainsi que la livraison et l'installation de toute l'infrastructure d accueil requise relative, notamment, au refroidissement, à la sécurité incendie et à l'alimentation et secours électrique ; la mise à niveau de l'infrastructure de liaison vers le cœur de réseau ; les travaux de renforcement et maçonnerie si nécessaires ; la livraison et l'installation de l'environnement logiciel nécessaire ; le transport et la manutention jusqu'au lieu d'implantation ; les droits d'utilisation ; le transfert de compétence ; trois années de garantie sur l'ensemble des matériels et logiciels installés ; trois années de maintenance prévisionnelle pour les matériels qui les requièrent (climatisation, onduleurs,...) les garanties associées aux éventuels aménagements structurels. Le candidat s'assurera de la faisabilité de son projet, notamment en ce qui concerne les travaux éventuellement nécessaires, les raccordements électriques et la capacité énergétique disponible. Il peut choisir de sous traiter des parties de la prestation dans les conditions définies dans le CCAP, il demeurera cependant responsable de l'ensemble vis à vis de l'oca Coût de fonctionnement Le coût de fonctionnement, en particulier la consommation électrique, les visites de maintenance préventive (climatisation, onduleurs...) et les remplacements périodiques 9/50

10 éventuels de composants (tels que batteries), de l'ensemble de la plate forme devront être considérés Homogénéité Extension La plateforme résultante devra être homogène du point de vue utilisateur et administrateur. Par exemple, mais de façon non exclusive : la supervision à distance (remontée d'alerte, mise sous et hors tension des nœuds, redéploiement des nœuds etc.) devra se faire de façon homogène et à travers la même interface ; l environnement logiciel sera identique, aussi bien au niveau des outils et middleware qu'au niveau des versions d'os ; les applications compilées devront pouvoir s'exécuter indifféremment sur la plateforme existante et la nouvelle plateforme ; Des variations par rapport à l environnement existant sont possibles, mais elles doivent alors être répercutées sur la plateforme existante afin d'offrir un environnement homogène. La mise à jour de la plateforme existante doit être intégrée dans l'offre (coût, main d'œuvre, délais) Nœuds de calcul Par «nœud de calcul», nous entendons une machine regroupant un ensemble de cpus/cœurs capable d'accéder à une mémoire vive commune. les processeurs des nœuds de calcul devront offrir un bon rapport cout/performance ; la seule contrainte concernant les processeurs est que leur jeu d'instruction soit compatible x86 ; chaque nœud devra disposer de a) au moins 48Go de RAM par nœud b) au moins 1Go de RAM par cœur, il est donc possible de dépasser l'une des deux contraintes pour satisfaire la seconde. les nœuds devront offrir de bonnes performances énergétiques. 1 nœud au moins devra disposer de 1 To de RAM adressable par un processus séquentiel. Le candidat prendra soin de bien distinguer le nombre de CPU et de cœurs. En ce qui concerne la mémoire, le candidat devra préciser : la quantité accessible par l'ensemble des cœurs du nœud ; les performances des accès mémoire, en particulier, les éventuelles contraintes d'affinité, si un cœur n'a pas un accès uniformément performant sur l'ensemble de la mémoire, 10/50

11 si les performances dépendent de la quantité de mémoire installée, il devra être clairement indiqué quelles seront les performances correspondant aux offres effectivement faites Espace de stockage Nous distinguerons ici deux types d'espace de stockage, l'espace de stockage de calcul, destiné à être accédé par l'ensemble des nœuds de calcul en parallèle et de façon efficace, et un espace de stockage d'archivage à moyen et long terme, destiné à stocker les données de calcul des équipes et autorisant leur mise à disposition depuis l extérieur du réseau interne du cluster (pour un accès via ftp par exemple). L'espace de stockage de calcul : devra être augmenté des 200To utiles actuellement disponibles à 300To utiles. La baie de stockage actuelle contient 80 disques de 3To chacun, il y reste 40 emplacement libres. L'ensemble des nouveaux nœuds devront avoir un accès efficace et concurrent à l'espace de stockage existant. Il est possible qu'il soit nécessaire de mettre à jour l'infrastructure existante pour parvenir à ce résultat. Un test, CBpipeline, est fourni pour tester les performances et la scalabilité de ces accès. (voir section , Erreur : source de la référence non trouvée). L'espace d'archivage : aujourd hui inexistant, devra être visible au minimum depuis les nœuds de login et il devra être possible de le joindre au moins au cas par cas depuis certains nœuds de calcul (un accès depuis l'ensemble des nœuds de calcul serait un plus, mais n'est pas obligatoire). Il devra être accessible depuis l extérieur du cluster, notamment pour un accès FTP. Cet espace devra être extensible, et les contraintes propres à ces extensions (notamment le type de matériel supporté et les contraintes d homogénéité propres à ces matériels) devront être explicitées. Une attention toute particulière sera apportée aux coûts et à la simplicité d'une telle extension de cet espace de stockage. Un volume initial de l ordre de 10To est attendu. Les modalités (matériel et logiciel nécessaires, impact sur les performances) pour un extension à 500To seront explicitées Nœud de login, de développement et d'administration L'offre pourra proposer d'ajouter des nœuds non dédiés au calcul si elle le juge nécessaire Réseaux En terme de fonctionnalités, 3 réseaux sont attendus : Un réseau d'administration Un réseau de calcul de haut débit et faible latence Un réseau permettant d'accéder à l'espace de stockage. Il s'agit là d'une vue logique, en terme d'implémentation, le candidat est libre de faire les choix qui lui semblent les plus pertinents, et notamment d'utiliser le même réseau physique 11/50

12 pour répondre à plusieurs besoins. Le réseau de calcul devra relier l'ensemble des nœuds de calcul de l extension, en particulier, une application MPI devra être capable d'utiliser l'ensemble des nœuds via ce réseau de calcul. Par contre il n'est pas nécessaire qu'il relie les nœuds de l'extension aux nœuds déjà en place, en particulier, aucune application MPI ne sera lancée «à cheval» sur l'extension et sur la grappe existante. Aussi bien les débits que les latences devront offrir des performances supérieures ou égales au réseau existant. Un débit minimal attendu est donc de 40Gbit/s, avec une latence minimale, l'offre devra indiquer les différentes latences obtenues en fonction de la localisation sur le réseau des nœud connectés. Le réseau devra permettre à l'ensemble des nœuds d'accéder à l'espace de stockage de façon concurrente et efficace Administration à distance L'ensemble de la plateforme devra demeurer, autant que possible, administrable à distance. Cela inclut, de façon minimale : administration système, déploiement, installation des nœuds possibilité d'allumer et éteindre les machines consultation des alarmes concernant notamment, si possible, les composants de la climatisation. D'une façon générale, l'offre indiquera aussi clairement que possible toutes les fonctionnalités concernant l'administration à distance. Elle indiquera également toutes les contraintes induites sur les postes clients, notamment en terme d'os et, le cas échéant, de tout composant de type machine virtuelle nécessaire. Les postes des administrateurs fonctionnent avec le système d'exploitation Linux (Ubuntu), le candidat prendra soin d'indiquer clairement les composants de son environnement d'administration à distance dont la compatibilité avec ce système n'est pas assuré. À contrario, le candidat s'engage à faire fonctionner avec ce système tout composant de son environnement d'administration à distance pour lesquels de telles limitations n'auront pas clairement été indiquées Environnement Logiciel En ce qui concerne l'environnement logiciel, les solutions de type Open Source seront préférées. Il s'agit là d'une préférence et non d'une contrainte forte : des outils propriétaires sont acceptables si un avantage clair peut être présenté par rapport à une solution Open Source du domaine considéré. Si le candidat choisit des solutions demandant une licence, le coût des licences sur 3 ans au moins sera bien évidement intégré. De plus, si ces contraintes sont liées à des composants pour lesquels il est envisageable d'ajouter des extensions (comme par exemple une licence propre à un nœud de calcul), le candidat indiquera le coût public d'une telle licence afin que nous puissions évaluer le coût d'une éventuelle extension. Le candidat fournira un environnement incluant les fonctionnalités habituellement 12/50

13 attendues sur un cluster de calcul de production, incluant notamment : Un système de déploiement permettant la ré installation des nœuds de calcul. En particulier, l'installation de nouveaux composants logiciels (librairies, runtimes etc...) devra être aussi simple et centralisée que possible. Un système de soumission de travaux configurable autorisant un arbitrage et une utilisation équitable des ressources de calcul, notamment dans le cadre de stratégies de type «fair share». L'outil inclura également des fonctionnalités de comptabilisation des consommations de ressources. L'offre indiquera les fonctionnalités offertes par l'outil pour aider à la mise en œuvre des points d'arrêts sur les travaux des utilisateurs. L'outil actuellement utilisé est OAR, une migration est envisageable si les avantages attendus la justifient. Si l'outil proposé exige une licence, le candidat indiquera clairement le coût public engendré par l'adoption de cet outil sur une extension extérieure à cet appel d'offre. Un environnement de développement/compilation autorisant au moins 5 compilations simultanées. Toutes choses égales par ailleurs, une solution faiblement couplée à un chipset particulier sera préférée afin que nous ayons la possibilité de la déployer sur l'ensemble de nos plateformes Linux/x86. Des licences flottantes sont souhaitées. Un système de compilation supportant les directives OpenMP est souhaité. Le candidat indiquera quels sont les fonctionnalités et outils de débogage et d'analyse de performances offerts par l'environnement de développement, Un environnement MPI(Message Passing Interface) choisi sur la base de la performance. Si l'utilisation de l environnement de développement requiert une implémentation MPI particulière, celle ci devra être installée. L'offre devra inclure les outils nécessaires à la mise au point, deboggage et profiling adapté aux applications parallèles et MPI. L'implémentation MPI choisie devra permettre l'exécution de codes hybrides (chaque job MPI étant lui même multi thread). Le candidat indiquera le niveau de multithreading supporté (SINGLE, FUNNELED, SERIALIZED ou MULTIPLE voir 8.7.3, MPI 2.0) ainsi que les conséquences, en terme de performance notamment, du choix d'un niveau élevé de support. Le système d'exploitation devra être familier à des usagers du système Linux. Les systèmes actuellement utilisés par l'équipe système sont CentOS, Debian et Ubuntu. Un autre OS ou distribution peut cependant être proposé par le candidat, en particulier si des avantages clairs sont démontrés. Une solution de développement de type OpenCL et Cuda devra être maintenue. Le système devra permettre l'installation des outils HPC (librairies notamment) du moment, et donc être suffisamment à jour. Le candidat s'engage à apporter l'aide nécessaire à une mise à jour du système d'exploitation en cas de mise à jour majeure du dit système durant une période de 3 ans. 13/50

14 Benchmarks Les performances, en terme de rapidité d'exécution, seront jugées par rapport à deux codes utilisateurs et un code public. Les deux codes développés par nos utilisateurs sont disponibles sur demande et après acceptation de nos conditions de confidentialité. Il sont référencés ci dessous sous les appellations cubby et seiscope. Il s'agit dans les deux cas de deux codes parallèles utilisant MPI. Sur ces deux codes, des performances au moins comparables à celles obtenues sur la plateforme actuelle, pour une même taille de problème et un même nombre de processus, sont attendues mais pas obligatoires. Le code public est le High Performance Linpack, disponible à l'url Il est référencé ci dessous sous l'appellation HPL. Pour l'ensemble de ces codes, le candidat indiquera clairement les performances sur lesquelles il s'engage sur la solution livrée. Si les performances annoncées exigent une configuration spécifique, le candidat l'indiquera. Par exemple, si l'obtention des résultats demande à ce que l'on désactive un cœur sur deux, ceci devra être clairement indiqué. Les résultats sur lesquels le candidat s'engage correspondront à une situation où les données éventuellement lues ou écrites par le programme se trouvent sur la solution de stockage globalement accessible. Nous souhaitons avoir les bornes supérieures des performances attendues pour les tests suivant : hpl pour une configuration significative seiscope : pour un problème de taille 50,100,180/8 sur 12 cœurs et 48 cœurs. CBpipeline : ce test sera soumis, à travers le job scheduler, sous forme de tableau de jobs pour des tableaux de taille 1 à 500. Les résultats seront comparés aux performances obtenues pour une instance soumise de façon interactive. Ce test aura pour objectif spécifique de vérifier le passage à l échelle de l'espace de stockage partagé. Cubby : pour un problème de taille sur 128 cœurs dans les deux configurations suivantes : test sans entrées/sorties test avec entrées/sorties Si le candidat juge qu'il n'est pas en mesure de fournir des estimations raisonnables pour les configurations sus mentionnées, il peut indiquer des estimations pour des cas plus modestes. Il peut également fournir des estimations de performances attendues pour des 14/50

15 problèmes de tailles plus importantes. Il précisera clairement, pour chaque run, la répartition des cœurs en processeurs et des processeurs en nœuds. Le candidat est encouragé à ajouter toutes les informations et résultats de benchmark permettant d'évaluer les caractéristiques de la plateforme. 3.2 Reprise du matériel obsolète Il est demandé au candidat de proposer une reprise du matériel obsolète correspondant à la phase initiale de la création du mésocentre. Le candidat procédera à l'enlèvement du matériel devenu obsolète et l 'évacuera vers les filières de retraitement adaptées selon le matériel désigné ci après : 4 armoires HP équipée de 57 machines, 7 baies de stockage, 10 switches : 1 x HP DL x HP DL x HP DL 145G2 2 x Bull R423 4 x Proliant DL380 6 x baie HP SFS20 de 10T 1 x baie DDN de 45 T 2 x switch gigabit HP x switch gigabit HP x switch Voltaire IS9024 (IB SDR 10Gb/s) 5 armoires IBM de 94 machines, 3 switch : 94 x IBM x x switch Flextronics 144 ports (IB DDR 20 Gb/s) 2 x switch gigabit HP2848 Le matériel sera mis à disposition du titulaire une fois que le nouvel environnement décrit dans le lot 1 sera mise en œuvre et opérationnel et le procès verbal de recette signé par l'observatoire de la Côte d'azur. La réponse apportée par le candidat ne devra pas présenter de coût pour l'observatoire de la Côte d'azur. La réponse sera prise en considération pour le choix final du fournisseur. 3.3 Environnement, électricité, climatisation... Il est demandé à ce que la consommation énergétique de l'ensemble de la 15/50

16 plateforme soit aussi efficace que possible Climatisation Pour maintenir une température de fonctionnement des équipements, les candidats sont libres de proposer la solution qui leur apparaîtra comme la plus pertinente. Ils devront cependant tenir compte des contraintes liées à l'homogénéité (voir section Erreur : source de la référence non trouvée Erreur : source de la référence non trouvée, et section Erreur : source de la référence non trouvée Erreur : source de la référence non trouvée) en prenant en compte les contraintes suivantes : pour les composants devant être installés à l'extérieur, il revient au candidat de s'assurer de la faisabilité des travaux ; le candidat devra donner une idée raisonnable des nuisances sonores engendrées par ces équipements ; le candidat fournira toutes les informations permettant d'évaluer la réponse de l'installation à une défaillance, totale ou partielle, du système de refroidissement en cas de coupure générale, comment réagit le système? des systèmes de surveillance logicielle (interruption sur remontée d'alarme par exemple) sont ils fournis? Tolérance aux défaillances électriques Le site est sujet aux pannes électriques, et ne dispose pas, de protection permettant d'aller au delà des coupures de courte durée. Afin d'y remédier, le lot n 2 du présent CCTP présentera une solution capable de prémunir le centre de calcul contre ce type de défaillance, en proposant par exemple un groupe électrogène Temps zéro. En ce qui concerne le cluster de calcul, un arrêt de service dû à une panne électrique n'est pas, en soit, considéré comme critique. Il est cependant de la plus haute importance de garantir l'intégrité des données et d'assurer une régularité de l'alimentation électrique compatible avec les contraintes de fonctionnement du matériel ainsi qu'une tolérance aux micro coupures. Le lot n 1 devra intégrer dans sa proposition en option, une solution pour permettre au centre de calcul de tenir le temps nécessaire au démarrage du groupe électrogène soit 5 minutes maximum Capacité électrique La capacité électrique actuelle, en terme d'intensité, est de l'ordre de 100Kva. Nous rappelons que le candidat ne doit pas simplement rester sous cette limite mais proposer une solution aussi économique que possible en terme de consommation électrique. 16/50

17 3.3.4 Sécurité incendie L'installation existante offre un système de sécurité incendie qui comprend notamment la détection et l'extinction automatique incendie. Le candidat devra maintenir ces fonctionnalités pour le cluster résultant. L'offre devra clairement indiquer les éventuels travaux qui seront entrepris pour permettre la mise en œuvre de l'installation. Si des modifications doivent être apportées pour maintenir l'extinction incendie efficace malgré l'augmentation de l'infrastructure, celles ci devront être chiffrées dans l'offre Connexion de l'extension du cube au cœur de réseau La rocade permettant la connexion des machines installées à l'intérieur du cube actuel au cœur de réseau du bâtiment étant saturée, il est nécessaire de proposer la création d'une nouvelle rocade (48 ports souhaités) entre une des baies de l'extension proposée et le local réseau du bâtiment (local CIO 2 06 sur Erreur : source de la référence non trouvée page Erreur : source de la référence non trouvée ). Le câblage (catégorie 6E) sera réalisé dans les règles de l'art. Les ports seront tous étiquetés et testés. Un cahier de recette devra être remis à la DSI à l'issue de ces tests. 3.4 Services minimum attendus Installation Le titulaire prendra en charge l'installation complète de l extension de la grappe de calcul, ainsi que l'ensemble des travaux annexes nécessaires à cette installation et à sa mise en production. L'installation aura lieu à l'adresse suivante : Observatoire de la Côte d'azur Salle CIO 2 01, Bâtiment CION, Boulevard de l'observatoire CS Nice Cedex 4 La salle CIO 2 00, jouxtant cette salle, héberge plusieurs machines qui devront continuer à fonctionner avec le moins de perturbations possibles durant toutes les opérations d'installation. Les interruptions, si elles s'avèrent nécessaires, seront réduites à leur strict minimum et planifiées. La salle CIO 2 01 héberge plusieurs machines qui devront continuer à fonctionner avec le moins de perturbations possibles durant toutes les opérations d'installation. Les 17/50

18 interruptions, si elles s'avèrent nécessaires, seront réduites à leur strict minimum et planifiées. L'installation comprend : la livraison et l'installation sur site ; les travaux nécessaires (climatisation, sécurité,...) ; l'intégration dans l'environnement logiciel de l'observatoire de Nice : adresses IP, nom, domaines, tables de routage, annuaires LDAP, serveurs DNS seront fournis ; les tests sur site du fonctionnement de l'ensemble du cluster : Administration : ré installation d'un nœud, d'un groupe de nœud, mise à jour logicielle, observation de l'état du cluster, mise sous tension et hors tension depuis une console déportée. Exploitation : soumission en batch de plusieurs calculs MPI et séquentiels, compilés à partir des sources sur la plateforme. Performance : tous les programmes seront compilés sur le cluster, les tests seront effectués à travers l'outil de gestion de travaux. Les tests utilisés comprendront : Deux tests de codes développés par nos utilisateurs et disponibles sur demande et après acceptation de nos conditions de confidentialité. Le test High Performance Linpack (HPL), disponible à l'url la livraison de la documentation ; le transfert de compétence ; l'enlèvement des emballages Service après vente Les aspects liés à la maintenance sont de la plus haute importance, elles concernent l'ensemble de la solution (dont calculateurs, éléments de climatisation, onduleurs et extinction incendie). Les prestations de maintenance proposées devront être détaillées pour chaque élément, elles comprendront au minimum : L'assistance sur trois ans, le candidat prendra soin de préciser le type de support (téléphonique, outils de suivi d'incident) et indiquera clairement les éventuelles limitations sur le nombre d'appels inclus dans l'offre à défaut de quoi il sera considéré comme illimité. La mise à jour logicielle sur 3 ans. La maintenance matérielle sur site (j+1) pour les éléments critiques. Au cas où un retour atelier est nécessaire, et suivant la durée de l'intervention, la mise à disposition d'un matériel de remplacement (conditions et délais à préciser). 18/50

19 En cas de panne persistante ou répétitive d'un composant, son remplacement Documentation La documentation sera fournie sous forme électronique sous un format non propriétaire pouvant être lu par un logiciel gratuit facilement disponible pour les systèmes Linux. Pour certaines documentations accessibles simplement et de façon pérenne sur le web, on pourra se contenter de fournir l'url. La documentation comprendra, au minimum : la documentation de tous les matériels décrits dans le présent CCTP ; la documentation administrateur et utilisateur nécessaire à l'exploitation et à l'utilisation de la solution, que ce soit au niveau matériel ou logiciel Formation Le candidat proposera une formation à l'équipe chargée de la prise en charge de la solution. Cette formation s'adressera à un profil administrateur (et de façon optionnelle, à un profil utilisateur si cela est jugé utile par le candidat). 3.5 Les travaux Dans l'éventualité où la solution proposée engendre des travaux (tels que le renforcement du plancher, percement du plancher, mise en place de dalles, etc.), l'exécution de ces travaux devront respecter les point suivants Contraintes Les travaux induits par la mise en place du matériel seront soumis et exécutés conformément aux règles de l'art, normes françaises, DTU, règlements en vigueur à la date d'exécution des travaux. Ils pourront être soumis à toutes les vérifications et diagnostics nécessaires à la demande du maître de l'ouvrage Documents de Référence Contractuels Seront documents contractuels pour l'exécution des présents marchés, tous les documents énumérés ci dessous. Marchés publics Seront documents contractuels pour le présent marché : uniquement les documents DTU et les documents ayant valeur de DTU devenus CCTG approuvés par décret et figurant sur la liste des fascicules interministériels CCTG ; les règles professionnelles, cahiers des charges, prescriptions techniques ou recommandations acceptées par l'afac et figurant sur la liste ; tous autres documents rendus obligatoires par les assureurs pour la prise en garantie 19/50

20 décennale des ouvrages ; toutes les normes NF concernant les ouvrages du présent marché, qu'elles soient homologuées ou seulement expérimentales. Seront documents contractuels pour le présent marché : tous les documents DTU et les documents ayant valeur de DTU, qu'ils fassent l'objet d'une norme ou non, y compris ceux qui n'ont pas fait l'objet d'un fascicule interministériel CCTG et ceci par dérogation au Code des marchés publics ; ces documents sont les cahiers des charges (CC) ou cahiers des clauses techniques (CCT), les règles de calcul, les mémentos, guides, instructions, etc., tous les autres documents ayant valeur de DTU ; les règles professionnelles, cahiers des charges, prescriptions techniques ou recommandations acceptées par l'afac et figurant sur la liste ; tous autres documents rendus obligatoires par les assureurs pour la prise en garantie décennale des ouvrages ; toutes les normes NF concernant les ouvrages du présent marché, qu'elles soient homologuées ou seulement expérimentales. Les cahiers des clauses spéciales (CCS) des DTU sont applicables uniquement aux marchés privés, et ne sont pas documents contractuels pour les marchés publics. En ce qui concerne toutefois les articles " Consistance des travaux " ou " Étendue des travaux " figurant dans les CCTP de certains lots et faisant référence aux CCS, les textes de ces articles sont, par dérogation, contractuels pour les marchés publics Connaissance des documents contractuels L'entrepreneur est contractuellement réputé être en possession et connaître parfaitement tous les documents contractuels visés lors de la passation des marchés de travaux, applicables aux travaux de son marché. L'entrepreneur devra, dans l'exécution des prestations de son marché, se conformer strictement aux clauses, conditions et prescriptions de ces documents. Par documents de référence contractuels applicables aux présents marchés, il faut entendre tous les fascicules, additifs, mémentos modificatifs, errata, etc., connus à la date précisée au CCAP ou à défaut celle découlant des clauses du CCAG Réglementation technique européenne Directive concernant les " Produits de construction " directive 89 / 106 / CEE produits de constructions, transposée en France par le décret du n du 8 juillet Pour le moment, il n'existe pas d'obligation d'employer des produits de construction titulaires de la marque de conformité CE. 20/50

21 Règles " Eurocodes " Ces règles n'ont pas pour le moment le statut de normes françaises homologuées et ne sont pas documents contractuels du présent marché (sauf spécifications contraires dans le CCTP ci après). DTU avec statut de norme Dans un but d'harmonisation européenne, et afin de pouvoir être reconnus par les autres États de la communauté européenne, les documents techniques unifiés (DTU) prennent progressivement le statut officiel de normes. Ces DTU à statut de normes sont précisés dans les CCTP des différents lots ci après. Pour certains lots, des normes EN sont visées dans les CCTP Ordre de préséance Dans le cas éventuel de divergence ou de discordance implicite ou explicite entre les spécifications du CCTP et les clauses et prescriptions des DTU et des normes, il est précisé ce qui suit. En ce qui concerne les DTU ou normes : pour toutes les prescriptions ayant trait aux matériaux, aux techniques de construction, aux règles de mise en œuvre, à la coordination des travaux, aux règles de sécurité, etc., ce sont les prescriptions des DTU et des normes qui prévaudront ; pour toutes les clauses à caractère administratif et financier et autres dispositions qui pourraient avoir une influence sur le caractère forfaitaire du marché, ce sont les clauses du CCAP qui prévaudront. Pour ce qui est des textes " Consistance des travaux " ou autres textes ayant le même objet, figurant dans les DTU, ce sont toujours les spécifications du CCTP qui prévaudront Matériaux et produits hors domaine d'application des DTU Pour les matériaux et procédés "non traditionnels" ou "innovants" qui n'entrent pas dans le cadre des documents contractuels visés ci dessus, les entrepreneurs devront se conformer strictement aux prescriptions et conditions des documents suivants : avis technique ; agréments européens ; ou, à défaut aux règles et prescriptions de mise en œuvre du fabricant. Pour les matériaux et procédés n'entrant dans aucun des cas énumérés ci dessus, la procédure d'appréciation technique d'expérimentation dite procédure ATEX pourra être imposée par le maître d'ouvrage. Les frais de cette procédure seront à la charge de l'entrepreneur. 21/50

22 3.5.7 Documents réglementaires à caractère général L'entrepreneur devra toujours respecter dans l'exécution de ses travaux, ainsi que pour les installations et l'organisation de chantier, toutes les lois et textes réglementaires, dont notamment les suivants : Code de la construction et de l'habitation ; Règlement national d'urbanisme (RNU) ; REEF ; règles Véritas Sécuritas Socotec ; réglementation sécurité incendie ; textes relatifs à l'hygiène et la sécurité sur les chantiers ; règlement sanitaire départemental et / ou national ; textes légaux relatifs à la protection et à la sauvegarde de l'environnement ; textes concernant la limitation des bruits de chantier ; législation sur les conditions de travail et l'emploi de la main d'œuvre ; règlements municipaux et / ou de police relatifs à la signalisation et à la sécurité de la circulation aux abords du chantier ; et tous autres textes réglementaires et lois ayant trait à la construction, à l'urbanisme, à la sécurité, etc. Décrets et arrêtés du 28 octobre 1994 et du 9 janvier L'entrepreneur devra respecter dans ces textes tous ceux applicables aux travaux de son marché Coordination sécurité et protection de la santé sur les chantiers Dans le cas où l'entrepreneur fera appel à un ou plusieurs sous traitants et, que de ce fait, plusieurs entreprises interviendront sur le chantier, seront applicables les lots, décrets, circulaires et autres textes officiels ayant trait à la coordination sécurité, connus à la date précisée au CCAP ou, à défaut, celle découlant des clauses du CCAG. L'entrepreneur sera contractuellement tenu de prendre toutes dispositions qui s'imposent et de répondre à toutes les demandes du coordinateur concernant l'intégration de la sécurité et l'organisation de la coordination en matière de sécurité et de protection de la santé sur les chantiers. Tous les frais en découlant pour l'entrepreneur sont contractuellement réputés compris dans le montant de son marché. 22/50

23 ARTICLE 4 LOT N 2 (Groupe électrogène) LES BESOINS 4.1 Introduction Le site est sujet aux pannes électriques, et ne dispose pas de protection permettant d'aller au delà des coupures de courte durée. Afin d'y remédier, l'offre devra inclure une solution capable de prémunir le site contre ce type de défaillance, en proposant par exemple un groupe électrogène. En ce qui concerne les nœuds du cluster de calcul, un arrêt de service dû à une panne électrique n'est pas, en soit, considéré comme critique. Il est cependant de la plus haute importance de garantir l'intégrité des données et d'assurer une régularité de l'alimentation électrique compatible avec les contraintes de fonctionnement du matériel ainsi qu'une tolérance aux micro coupures. L Observatoire de la Côte d Azur souhaite donc se doter d un groupe électrogène extérieur afin de répondre aux dysfonctionnements électriques du réseau opérateur qui perturbe la disponibilité et le bon fonctionnement du Centre de Calcul et de l ensemble des services associés. Un système de notification des alertes par GSM devra être proposé avec la solution retenue. L'environnement, (sur le site d'accueil) est fourni «tel quel», le candidat devra prévoir, et intégrer l'ensemble des installations et travaux à entreprendre pour parvenir au résultat final. Le bâtiment dans le lequel est hébergé le calculateur (CION) est alimenté par un poste TGBT : «A2». Il est prévu pour des raisons de simplicité de connecter le groupe au niveau de ce poste de distribution. Le groupe électrogène doit démarrer le plus rapidement possible (temps 0) pour ne pas perturber les travaux effectués par les calculateurs et les services associés. Le Centre de Calcul consomme à lui seul environ 100Kva. Mais il faut inclure les services associés au fonctionnement du centre de calcul (réseaux, services...). Il reste préférable de proposer une solution qui alimente les bâtiments appelés CION et PES. La consommation estimée des bâtiments pourrait avoisiner les 500KVA. Le groupe électrogène proposé sera équipé d un réservoir qui offre une autonomie de 24H à 80% de charge. Une variante sera proposée pour une autonomie supplémentaire de 24 heures soit un total de 48 heures à 80 % de charge. Le groupe électrogène sera soumis à des températures extérieures entre 10 C mini et 45 C maxi. 23/50

24 4.1.1 Contenu de la prestation La prestation demandée comprend : les études préalables, pour la mise en œuvre du groupe électrogène ; la livraison ; l'installation de toute l'infrastructure d'accueil (exemple : fournitures, raccordements, VRD, pénétration dans le TGBT, cheminements des câbles BT, armoires, inverseur, câblage de l'ensemble, etc...) requise à l'alimentation et secours électrique ; les travaux de renforcement et maçonnerie si nécessaire (exemple : radier supportant le groupe) ; l'enlèvement des emballages ; les essais ; l'installation de l'environnement logiciel nécessaire ; le transport et la manutention jusqu'au lieu d'implantation ; les droits d'utilisation ; le transfert de compétence ; les contrats de maintenance ; les garanties associées aux éventuels aménagements structurels. Le candidat s'assurera de la faisabilité de son projet, notamment en ce qui concerne les travaux éventuellement nécessaires, les raccordements électriques et la capacité énergétique disponible. Il peut choisir de sous traiter des parties de la prestation dans les conditions définies dans le CCAG, il demeurera cependant responsable de l'ensemble vis à vis de l'oca Réglementations L ensemble des installations sera réalisé dans les règles de l art et conforme aux réglementations en vigueur. Les listes ci dessous ne sont pas exhaustives mais constituent seulement un rappel des principales réglementations. Les normes, décrets, arrêtés et circulaires en vigueur pour le chantier sont celles valables à la date de signature du marché. Décrets Décret 6548 du 08/01/1965 Règlement pour l exécution de BTP Décret du 14 /06/1969 Régissant globalement les «règles de construction», avec l ensemble des arrêtes d application, ainsi que tous les modificatifs connus au jour de la soumission. Décret du 31/10/1973 Code de la construction et de l habitation. 24/50

25 Décret du 20/03/1979 Décret du 1056 du 14/11/1988 Décret du 29/07/1992 Décret du 29/07/1992 Décret du 29/07/1992 Décret du 29/07/1992 Décret du 03/09/1992 Décret du 11/01/1993 Décret du 93 41d du 11/01/1193 Décret du 26/12/1994 Décret du 04/05/1995 Décret du 06/05/1995 Décret du 09/06/1999 Décret n du 01/09/2004 Lois Loi 1195 du 27/12/1973 Loi 1106 du 06/12/1976 Loi 1414 du 31/01/1991 Loi du 31/12/1993 Arrêté du 10/12/1975 Arrêtés Formation à la sécurité. Protection des travailleurs dans les établissements qui mettent en œuvre des courants électriques. Équipement de travail et moyens de protection soumis aux obligations de sécurité. Procédures de certification de conformité. Règles techniques et procédures de certification de conformité. Règles techniques et procédures de certification de conformité applicables aux équipements de protection individuelle. Manutention manuelle. Prescription techniques applicables pour l utilisation des équipements de travail. Règles générales d utilisation des équipements de travail et moyens de protection. Hygiène et sécurité, Collège inter entreprises de sécurité, de santé et de conditions de travail. Travailleurs indépendants. Code de la santé publique, chapitre 4 : lutte contre la présence de plomb ou d amiante Articles L à Utilisation des équipements de travail mis à disposition pour des travaux temporaires en hauteur et modifiant le code du travail (deuxième partie : Décrets en Conseil d Etat) et le décret n du 8 janvier 1965 Amélioration des conditions de travail Développement de la prévention des conditions de travail. Équipement de travail, moyens de protection. Chantiers temporaires et mobiles. Règles relatives à la limitation du niveau sonore des bruits et du 02/02/1986 aériens émis par les groupes 25/50

26 électrogènes de puissance. Arrêté du 10/11/1976 Notes techniques annexes du ministère du travail. Arrêté du 22/06/1990 Modifié le 02 février 1993 Arrêté du 01/03/1993 Relatifs aux prélèvements et à la consommation d eau ainsi qu aux rejets de toute nature des installations classées pour la protection de l environnement soumises à autorisation. Arrêté du 04/11/1993 Relatif à la signalisation de sécurité et de santé au travail. Arrêté du 23/01/1997 Relatif à la limitation des bruits émis dans l environnement par les installations classées pour la protection de l environnement. Arrêté du 25/07/1997 Rubrique 2910, relatif aux prescriptions générales pour la protection de l environnement, applicables aux installations classées et soumises à déclaration. Arrêté du 10/08/1998 Modifiant l arrêté du 25 juillet 1997, relatif aux prescriptions générales soumises à déclaration sous la rubrique N 2910 (Combustion). Normes NF M NF P NF U.S.E, CE et ISO 9001/9002/9003 UTE C Réglementation applicable aux installations de stockage et d utilisation d hydrocarbures liquides. Relative aux installations provisoires de chantier. Relatives à la qualité des matériels utilisés. Huiles minérales isolantes neuves pour transformateurs et appareillage de connexion Règles. NF C Concernant l éclairage de sécurité. CEI 34 1 Relative à la conformité des moteurs thermiques. CEI 56 (NF C 64100) Disjoncteur à courant alternatif en haute tension CEI 76 1 Transformateur de puissance 1 ère partie : Généralité CEI 76 2 Transformateur de puissance 2 ième partie : Échauffements. CEI 76 3 Transformateur de puissance 3 ième partie : Niveaux d isolement et essais diélectriques. CEI Transformateur de puissance 3 ième partie : Niveaux d isolement et essais diélectriques Distances 26/50