Haute disponibilité sur le Réseau Académique Parisien

Transcription

1 Haute disponibilité sur le Réseau Académique Parisien TutoJRES #9 : Haute disponibilité des réseaux TutoJRES #9 : Haute disponibilité des réseaux Université Paris Descartes, 4 Février 009 rap-ds@rap.prd.fr

2 Projet initié en 1999, réseau construit en POPs en anneau dans Paris 65 établissements 116 sites raccordés en optique (Ethernet 100M ou 1G) 4 sites en bas-débits (SDSL) Services déployés : IPv4 unicast et multicast IPv6 unicast et multicast CoS VPN L (VLAN Ethernet) Services multimédias (VoD) Supervision 4/7 Renouvellement des marchés en Refonte du backbone en 008 Contexte

3 Objectif : Rendre le réseau plus fiable au meilleur coût Constats : La fiabilité moyenne du réseau est en général supérieure à 99,7% Les interruptions de service sont toujours dues à une panne localisée en un point du réseau (équipement ou liaison) Le réseau est une ressource de plus en plus critique Démarche : 99,7% de fiabilité, soit 0,3% de non fiabilité = 0,003 de probabilité de panne En doublant les chemins et en redondant les services, la probabilité d interruption de service devient le produit des probabilités sur chaque liaison: 0,003 * 0,003 = 0, , = 0,0009% de taux de non fiabilité => Fiabilité = 99,9991% Contexte

4 Historique du raccordement fiabilisé sur RAP Q1 007 : Double raccordement sur RENATER Redondance : raccordements distincts au niveau physique Répartition des trafics : Mode Actif-Actif, partition du backbone en zones Eviter l'asymétrie de trafic Q 007 : Spécifications du double raccordement pour les sites Prise en compte des différents cas : (1)double raccordement à RAP, ()raccordement secouru, (3)raccordement RAP/FAI Différents types de raccordement au niveau physique Différents modes : actif-actif vs actif-passif en évitant l'asymétrie de trafic Le service est basé sur BGP (fiabilisation IP) Q4 007 : Mise en oeuvre, premier site doublement raccordé Q1/Q 008 : Tutoriel Raccordement fiabilisé à RAP (70 participants) Q1 009 : Fiabilisation des niveaux 4

5 Constation sur l origine des interruptions de service Interruption due à un incident sur fibre optique : - - Interruption due à un incident sur équipement actif : - Interruption due à l exploitation du réseau : Maintenance Configuration Erreur + Interruption due à l environnement : Alimentation électrique Climatisation

6 RAP (avant) cr NR-JUSSIEU IP cr NR Jussieu dwdm dwdm E gw-bd gw-jussieu R E N Malesherbes CNAM Auteuil Jussieu dwdm cr A TE cr dwdm Odéon dwdm R cr IP gw-odeon NR Aubervilliers NR- AUBERVILLIERS

7 RAP (maintenant) PoP Malesherbes PoP Cnam RAP PoP Jussieu NR-JUSSIEU RENATER PoP Auteuil PoP Odéon NR-PARIS-1 PE = Juniper MX-480

8 Double attachement sur RENATER Redondance d accès : liens physiques distincts : PoP Jussieu - NR-JUSSIEU PoP Odéon - NR-PARIS-1 Répartition des charges : Partition du backbone en zones : Odéon et Jussieu Utilisation des communautés BGP définies par RENATER : Zone RAP Jussieu Site raccordé au PoP CNAM ou Jussieu Odéon Site raccordé au PoP Odéon, Auteuil ou Malesherbes NR-PARIS-1 NR-JUSSIEU 00:590 00:610 RAP-Community-Backup RAP-Community-Main 00:610 00:590 RAP-Community-Main RAP-Community-Backup 8

9 Double attachement sur RENATER Zone Odéon Zone Jussieu PoP Malesherbes RAP PoP CNAM ibgp full-routing PoP Jussieu ebgp full-routing NR-JUSSIEU RENATER PoP Auteuil PoP Odéon NR-PARIS-1

10 Double attachement sur RENATER Cnam J RAP JussieuRoutes sites J : 00:610 Routes sites O : 00:590 full-routing v4/v6 Routes sites O: 00:610 Routes sites J : 00:590 NR-JUSSIEU RENATER O Malesherbes Odéon full-routing v4/v6 NR-PARIS-1 Auteuil

11 Composition d une liaison typique Un segment entre le site et la plus proche station de métro (4 brins) construit en égout lors du raccordement du site Un segment sur le réseau Telcité (continuité de deux brins optiques) Un segment entre la station de métro proche du POP et le POP (36 ou 7 brins) Site Conv. Réseau optique Telcité POP 1 Conv. Très peu de pannes

12 Exemple d un double raccordement d un site Réseau optique Telcité POP 1 Conv. Site Conv. Conv. POP Conv.

13 Types de raccordements fiabilisés au niveau physique Raccordement fiabilisé «standard» : RAP Telcité Site Réutilisation du tronçon existant en égout Raccordement fiabilisé sur câble séparé : RAP Telcité Site Pose d'un nouveau tronçon en égout 13

14 Fiabilisation des services IPv4/IPv6 Raccordement statique ou dynamique : Routage statique ou peering ebgp Toutes les routes des sites sont injectées dans l ibgp de RAP Double attachement d un site, peerings ebgp : PoP nominal PoP de secours Répartition des charges par préfixe IP Une communauté nominale par PoP : pour le rendre propriétaire Tableaux des correspondances communauté SITE - localpref RAP : Policy en entrée Trafic en sortie du site vers Internet : OSPF fait son travail Trafic en entrée de l Internet vers le site : Tableau des correspondances locapref RAP - communauté RENATER Policy en sortie Pour un site statique : Ses routes sont marquées de la localpref nominal du PoP auquel il est raccordé 14

15 Fiabilisation des services IPv4/IPv6 POP 1 = PoP nominal, = PoP de secours Communauté Jussieu Odéon Auteuil Malesherbes CNAM = PoP nominal, = PoP de secours (3,4,5 : généralisation à 5 accès) 15

16 com lpf Malesherbes RAP com lpf Auteuil com lpf com lpf com lpf Lpf com Cnam Jussieu Odéon Lpf com NR-JUSSIEU RENATER NR-PARIS-1

17 Site Localpref ibgp RAP Malesherbes RAP Policy-in Préfixe IP1 : Communauté 4:500 Préfixe IP : Communauté 4:400 Cnam Jussieu 100 Policy-out Préfixe IP1 : 00:610 Préfixe IP : 00:590 NR- NR- PARIS-1 RENATER JUSSIEU Auteuil Odéon Préfixe IP1 : 00:590 Préfixe IP : 00:610

18 Raccordement fiabilisé des LVPN Déploiement VPLS (Q4 008) Prise en compte du raccordement fiabilisé des sites (en cours) Ethernet OAM (à venir) 18

19 Supervision/Monitoring Superviser et connaître l état de fonctionnement du double raccordement : Etat nominal? Etat non nominal fonctionnel? Etat non nominal non fonctionnel? Moyens : ICMP depuis un serveur de supervision => attention à l asymétrie SNMP Ping : MIB ICMP SNMP : état du peering BGP réception des routes dampening? Looking-glass, prochainement sur RAP Métrologie Courbes MRTG à adapter Tester les scénarios de pannes (régulièrement)! 19

20 Conclusion Conception du raccordement fiabilisé pour : éviter tant que c'est possible l'asymétrie de trafic tout en permettant de répartir les flux sans figer «en dur» l'ingénierie du trafic Temps de convergence en-dessous de la seconde (observé «empiriquement») réglages fins nécessaires pour le réduire encore plus Communautés supplémentaires pour les sites raccordés à un autre FAI (3 sur RAP) Questions? 0