La Compression, une fonctionnalité extraordinaire pour la Haute Volumétrie.

Transcription

1 <Insert Picture Here> La Compression, une fonctionnalité extraordinaire pour la Haute Volumétrie. Philippe de Saint Aignan, Administrateur Senior OCP Oracle Présentation du mercredi 29 juin Hôtel Concorde Opéra - Paris

2 Sommaire Considérations sur la Haute Volumétrie Qu est-ce que la compression Oracle Compression et Performance applicative Retour d expérience Stockage & Performances. Réponses aux problématiques de volumétrie 2

3 Qui suis-je? Administrateur Oracle OCP, Consultant Indépendant, Spécialisé dans l optimisation des processus. 15 ans d expérience sur Oracle et toujours passionné!! Mise en place de la Compression Oracle pour de très fortes volumétries (>12 Teraoctets ) sous SAP.

4 Un résumé de l apport de la Compression? Qui veut gagner un million? (*) (*) Economies réalisables par l entreprise

5 Quelques considérations sur la Haute volumétrie Sous SAP, une volumétrie de 10 To gérant 10 millions de clients équivaut à 1 Mo par client géré - l équivalent d un livre de poche de 450 pages! - Tendance forte à l augmentation constante des volumes de données et à leur réplication. Augmentation des délais de rétention de la donnée (réglementations Sarbanes-Oxley Act, Bâle )

6 Problématiques autour de la volumétrie Quelle architecture? Quel coût de stockage? Quelle baie? Quel coût d exploitation? Quel SLA? Quelles limitations techniques? Quel archivage? Quelles performances applicatives? Doit-on avoir peur de tels volumes?

7 Qu est-ce que la compression Oracle : Fonctionnalité présente depuis Oracle 9i ; Proposée pour les Tables et les Index (mécanismes différents ) ; Plus les données d une table sont redondantes, plus le taux de compression sera élevé depuis Oracle 11g, la compression de données devient «Online» : COMPRESS FOR OLTP.

8 Schéma de la compression Oracle 11g 1/2 Les blocs compressés incluent une structure appelée «table de symboles» qui tient à jour les métadonnées de compression. Lorsqu'un bloc est compressé, une copie de la valeur dupliquée est ajoutée à la table de symboles. Chaque doublon est ensuite remplacé par une courte référence à l'entrée appropriée dans la table de symboles. Les données compressées et les métadonnées cohabitent dans le bloc.

9 Schéma de la compression Oracle 11g 2/2 Source : White Paper Oracle - Compression avancée/ Oracle Database 11g Release 2

10 Illustration des redondances dans une table de facturation ( 2 To). Chaque contrat est stocké sur plusieurs lignes comportant sur chacune des informations similaires : mêmes numéro de client, dates, types de facturation

11 Faites le test!! SQL > create table uncompressed_table as select * from TABLE_DES_CONTRATS where rownum < ; SQL > create table compressed_table COMPRESS as select * from TABLE_DES_CONTRATS where rownum < ; SQL > create table OLTP_compressed_table COMPRESS FOR OLTP as select * from TABLE_DES_CONTRATS where rownum < ;

12 Compression et performances applicatives. les problèmes de performance au sein d un SGBD sont la plupart du temps relatifs aux disques durs et notamment au nombre d I/O (Entrées/Sorties) qu ils sont capables de traiter par seconde (IOPS). Comparés aux processeurs actuels capables de prendre plusieurs milliards de décisions par seconde (Ghz) et aux mémoires vives avec des temps d accès en nanosecondes, le temps d accès d un disque dur se compte encore en millisecondes La réduction de la volumétrie s accompagne d une réelle diminution des I/Os.

13 Compression et performances applicatives (2). La compression : réduit fortement les consommations I/Os des Full scans (tables/index) ; réduit l utilisation du buffer cache (moins de blocs à lire) ; accélère fortement les temps de créations d index; réduit fortement les consommations I/Os des range scans avec des index à clustering factor très bas (notamment via les Primary Keys). Augmente vos consommations CPU (travail lié à la compression ) tout en améliorant la performance globale

14 Retour d expérience - stockage Réduction des volumétries SAP : par deux avec la compression 9i ( partitionnement par date et compression des données obsolètes) ; par trois avec la compression continue Oracle11g : possibilité de compresser désormais la plupart des tables. le taux de compression de beaucoup de tables atteint 80%. Et les gains? 5 Teraoctets économisés x 9 environnements = 45 Teraoctets économisés ~ 1 million d euros (*) (*) en incluant les coûts d exploitation.

15 Retour d expérience - Performances La compression réduit significativement le temps de certains très gros traitements : la Nuit Applicative est réduite de 20% : Tenue des indicateurs Moins de stress pour chacun!! Le temps de certaines opérations de maintenance est réduit : Temps de création d index sur de très grosses tables réduit de 66%. La consommation CPU est augmentée de 20%: mais notre application est «I/O-dépendante».

16 Réponses aux problématiques de volumétrie Quelle architecture? Quelle baie? Quel coût de stockage? Quel coût d exploitation? En réduisant vos volumétries significativement, vos choix et vos coûts de stockage et d exploitation s en trouveront également réduits. Quel SLA? Quelles limitations techniques? Les temps de sauvegardes, restaurations, copies d environnement, créations d index sont fortement dépendants de la volumétrie.

17 Réponses aux problématiques de volumétrie (2) Quel archivage? En réduisant fortement vos volumétries statiques, le risque d un archivage défaillant/insuffisant/différé est fortement atténué. Quelles performances applicatives? La réduction des volumes I/Os doit se traduire par une réduction sensible de la durée de certains de vos traitements.

18