Rappels( Requêtes(OLAP( Rappels( Requêtes(SIO/SID(

Transcription

1 RequêtesOLAP Rappels Aucoursprécédent,onavu Ladis9nc9onOLTP/OLAP Lemodèlemul9dimensionnel,etsonimplémenta9onen rela9onnelschémaenétoile/flocon) Lareprésenta9ondesfaitsetdesdimensionsàl aided uncube Unemesure=une valeurselonn dimensions,d'oùla no9ondehyper)cube dedonnées. Unfaitestuncube atomiqueàl intérieur d unplusgrandcube. RequêteOLAP: manipula9ondece cube. Rappels RequêtesSIO/SID DansunSIO: Requêtestransac9onnellescfcoursSGBD) Insert,update,delete,select Requêtesportantsurpeudetuples DansunSID: Requêtesanaly9ques insertparlots)etselect Manipula9onducubeetdesdimensionsavec leurshiérarchies:drilldown,slice,dice, 4

2 ExemplesderequêtesOLAP Naviga9ondansuncube «Nombredelivrespourenfantsvendusenjanvier, indépendammentdulieu» Naviga9onàtraversleshiérarchies «Montantdesventesparfamilledeproduits,par trimestreetrégion» Classement «Les10livreslesmieuxvendusen2013,par région» Manipula9onducube UnerequêteOLAPpermetdenaviguerdanslemodèlemul9 dimensionnel: Rotate):)Choisirlepivotd analyseenfaisanttournerlecube Applica9ond uncritèredesélec9on: Slice:sélec9onsurunedimension Dice):sélec9onsurplusieursdimensions) Naviga9ondansleshiérarchies: Roll)up:naviguerversunegranularitéplusgrossière Drill)down):versunegranularitéplusfinezoom) Modifica9ondunombrededimensions: Drill)out/split):ajouterdesdimensions Drill)in/merge):enleverdesdimensions Nous%ne%verrons%ici%que%des%opéra1on%portant%sur%1%cube,%il%existe%aussi%des% opéra1ons%perme9ant%de%faire%le%lien%entre%plusieurs%cubes.% 5 6 Rota9on Slice Changel orienta9ondimensionnelledel analyse.par exemple: produit 2009) 2010) 2011) Oeuf Viande temps lieu lieu 2009) 2010) 2011) IDF Nord temps produit Permetd extrairedesinforma9onsreprésentées paruncube,enfonc9ondestermesdéfinispour unedimension. Leparamètredel opérateursliceestuncritère desélec9onportantsurunedimension. Exemples: mois>2)andmois<=11)andmois<>4) Pays= DE andcode_postal=10179ici,dimension géographiqueavecplusieursniveaux) Nota9on:sliceF,D)sélec9ondes«tranches» quisa9sfontlaformulefsurladimensiond. 7 8

3 Sliceo Sliceannée=2011ouannée=2013,Temps) catégorie) Lieu ville) Dice Applica9ond unesélec9onsurplusieurs dimensions,doncpeutoêtrevucommela combinaisondeplusieursslices. Sliceproduitdes«tranches»ducubeini9al, Diceproduitdes«sousocubes» Temps année) 9 10 Diceo Rollup,Drilldown Sliceannée=2011orannée=2013,Temps) andslicefamille= médias,produit) andsliceville= Lille orville= Lyon,Lieu) catégorie) CD DVD Bluray Lille Lyon Lieu ville) Temps année) 11 Opéra9onmodifiantlagranularité: Forageverslehaut,roll)up):commeonva versunegranularitéplusgrossière,ilfaut u9liserdesfonc9onsd agréga9onpour calculerlesnouvellesmesuresapen9onaux mesuresnonaddi9vesousemiaddi9ves) Forageverslebas,drill)down):onob9entdes donnéesplusdétaillées,jusqu àlagranularité del entrepôt. 12

4 Rollup,Drilldown Rollup Rollup 09 Rollupdecatégorie/mois/ville)versfamille/trimestre/ville) 11 Dimension% Temps% Alim Fruits 10 Rollup Fruits Viande Viande Boeuf famille) 1S09 2S09 1S10 2S10 1S11 Fruits Viande Pomme catégorie) Drilldown Lieu ville) Lieu ville) CD DVD Bluray Viande Fruit Drilldown Médias Alim. Temps mois) T1T2 Temps trimestre) Dimension%Produit% Drilldowno Split/Merge Drilldowndefamille/trimestre/ville)verscatégorie/mois/ville) Lieu ville) Médias Alim. T1T2 Split: uncubeàndimensionsestcomplétépark dimensions. Onob9entdesdonnéesplusdétaillées,pasàcause duchangementdegranularitémaisparcequ on détailleenfonc9ondenouvellesdimensions catégorie) famille) Temps trimestre) Merge: Lieu ville) CD DVD Bluray Viande Fruit Temps mois) 15 Onsupprimedesdimensions Onob9entdesdonnéesmoinsdétaillées,parcequ ily amoinsdedimensionsmaispasdechangementde granularité) 16

5 Splitoexemple SplitdeladimensionTempspassagede1à2dimensions) Mergeoexemple MergedeladimensionTempspassagede2à1dimensions) catégorie) CD DVD Bluray Viande Fruit catégorie) CD DVD Bluray Viande Fruit T1 T2 T3 T4 Temps trimestre) catégorie) CD DVD Bluray Viande Fruit T1 T2 T3 T4 Temps trimestre) catégorie) CD DVD Bluray Viande Fruit Implémenta9ons SQLoOLAP Ilexisteprincipalement2approches ExtensiondulangageSQLSQLoOLAP),pouruncube stockédansunsgbdrela9onnel,souslaformede schémaenétoileouenflocon.onparledemodèle ROLAPouRela9onaloOLAP Expressionmul9dimensionnelleex:MDXde Microsov)s appliquantdirectementàunsgbd mul9dimensionnel.onparledemodèlemolap)ou Mul9dimensional OLAP Il%existe%aussi%un%modèle%hybride%entre%ces%2%solu1ons,% appelé%holap%pour%hybrid%e%olap% ExtensiondeSQL3SQL 99). Onu9liselesopérateursSQLclassiques: Jointurestablesdefaits/dimensions),sélec9ons, projec9ons,groupby, SQLestenrichiavecdenouveauxopérateurs: ClauseGroupby,avecCube,RollupetGroupingsets Fonc9ongrouping Expressionsanaly9ques: Fenêtreglissante Fonc9onsdeclassementRank,NTile 19 20

6 GroupBy Groupbyap 1,,ap n permetdepar99onnerlesdonnées enmepantdanslemêmegroupelestuplesquiontla mêmevaleurpourap 1, ap n ) Dansleselect,peuventfigurerap 1,,ap n etdesfonc9ons degroupecount,sum,avg,min,max)portantsur n importequelapribut. ClauseHavingpoursélec9onnerlesgroupes :onsupposeunegranularitéjour/produit) Select mois, annee, sumca) From Ventes V Join Temps T on V.TID = T.TID Join Produit P on V.PID = P.PID Where P.famille = Médias -> slice dimension Produit Group by mois, annee -> rollup sur la dimension temps SELECT fact1_id, fact2_id, COUNT*) AS num, SUMsales_value) AS sales_val FROM fact_tab GROUP BY fact1_id,fact2_id ORDER BY fact1_id,fact2_id; Fact1_id) Fact2_id) Num) Sales_val) Groupbyrollup Calculelesfonc9onssum,count, )àtousles niveauxd unehiérarchied unedimension, ainsiquelerésultatfinal. Groupbyrollupap 1,ap 2,ap 3 )définitdes groupementsparap 1,ap 2,ap 3 ),parap 1,ap 2 ), parap 1 )etpar). S ilyanapributsdanslegroupbyrollup,onaura doncn+1niveauxd agréga9on. SELECT fact1_id, fact2_id, SUMsales_value) AS sales_val FROM fact_tab GROUP BY ROLLUP fact1_id,fact2_id) ORDER BY fact1_id,fact2_id; 23 Fact1_id) Fact2_id) Sales_val) ) ) ) ) ) 24

7 Groupbycube Calculelesfonc9onssum,count, )pour touteslescombinaisonspossiblesde groupement Groupbycubeap 1,ap 2,ap 3 )définitdes groupementsparap 1,ap 2,ap 3 ),ap 1,ap 2 ),ap 2, ap 3 ),ap 1,ap 3 ),ap 1 ),ap 2 ),ap 3 )et). S ilyanapributsdanslegroupbycube,onaura donc2 n niveauxd agréga9on. SELECT fact1_id, fact2_id, SUMsales_value) AS sales_val FROM fact_tab GROUP BY CUBE fact1_id, fact2_id) ORDER BY fact1_id, fact2_id; 25 Fact1_id) Fact2_id) Sales_val) ) ) ) ) 1) ) 2) ) 3) ) 4) ) 5) ) ) 26 Groupbygroupingsets Permetdesgroupementsmul9ples :grouperparmois,region)etmois, produit) Legroupe)représentelarela9onen9ère Lerollupetlecubepeuventêtreécritsavec ungroupingsets. SELECT fact1_id, fact2_id, fact3_id, SUMsales_value) AS sales_val, FROM fact_tab GROUP BY GROUPING SETS fact1_id, fact2_id), fact1_id, fact3_id) ) ORDER BY fact1_id, fact2_id, fact3_id; 27 Fact1_id) Fact2_id) Fact3_id) Sales_val)

8 Groupements Onpeutu9liserdesensemblesd apributsdansles expressionsdegroupe: GROUP BY ROLLUP a, b), c) Ongroupeselona,b,c)a,b))pasa) GROUP BY CUBE a, b), c) Ongroupeselona,b,c)a,b)c))pasa,c)a)b,c)b) Onpeutconcaténerdesgroupementsenlesséparant pardes, cequirevientàgrouperselonleproduit cartésiendesdifférentsgroupements: GROUP BY GROUPING SETSa, b), GROUPING SETSc, d) Ongroupeselona,c)a,d)b,c)b,d) GROUP BY A, GROUPING SETS B),C), )) Équivalentà GROUPING SETS A,B),A,C),A)) Fonc9ongrouping Onveutdéterminerpour1apributde groupementsiuneligneestuntotal GROUPINGaP)renvoie1sionaune valeur«null»dueàungroupementpour cetapributdoncunsousototal) U9liséedansuneclauseHAVING,cepe fonc9onpermetdoncdechoisirletypede groupement Fonc9ongrouping_idOracle) SELECT fact1_id, fact2_id, SUMsales_value) AS sales_val, GROUPINGfact1_id) AS f1g, GROUPINGfact2_id) AS f2g FROM fact_tab GROUP BY CUBE fact1_id, fact2_id) HAVING GROUPINGfact1_id) = 1 OR GROUPINGfact2_id) = 1 ORDER BY GROUPINGfact1_id), GROUPINGfact2_id); Fact1_id) Fact2_id) Sales_val) f1g) f2g) Groupingfact1_id)renvoie1quandfact1_idvautnullsuiteaugroupement 31 GROUPING_IDrenvoieunnombrequipermet d iden9fierletypedegroupementdechaqueligne. GROUPINGportesuruneseulecolonne,pourtesterles différentscritèresdʼagréga9on,ilfautautantdecolonnes degroupingquedecolonnesderegroupement Lafonc9onGROUPING_IDsynthé9seenuneseulefonc9on lʼétatdʼagréga9onsurlesensemblesdecritères Parexemple: CUBEa,b) Niveau)de) groupement) Bit)vector) grouping)) a,b 00 0 a 01 1 b 10 2 total 11 3 Grouping_id) 32

9 Expressionsanaly9ques SyntaxeOracle: fonction expression) over [clause de partitionnement] [clause d'ordre [clause de fenêtrage]]) Laclause)de)parUUonnement:delaformePARTITION)BY) Elledéfinitundécoupagedesdonnéessuivantlesvaleursdescolonnesdu PARTITIONBY. Chaquevaleurdéfinitungroupelogiqueàl'intérieurduquelestappliquéela fonc9onanaly9que. La)clause)d'ordre):delaformeORDER)BY) )) Elleindiquecommentlesdonnéessonttriéesàl'intérieurdechaquepar99on. La)clause)de)fenêtrage)indiquel'ensembledeslignessurlequeldoitêtre appliquéelafonc9on. Cepeclausedéfinitunefenêtreglissante,i.e.unesuitedelignesautourde avant/après)lalignecourante. Siuneclausedefenêtrageestspécifiée,uneclaused'ordredoit obligatoirementl'êtreaussi. Lire%la%documenta1on%pour%la%syntaxe% % table COTATION isin varchar2 20), -- identifiant de la société dte date, -- date de cotation ouv number, -- premier cours de la journée max number, -- cours le plus haut de la journée min number, -- cours le plus bas de la journée clo number, -- dernier cours de la journée clôture) volume number, -- nb d'actions échangées ) -- isin, dte) clé primaire select isin, dte, avgclo) overpartition by isin order by dte rows 4 preceding) mma_5 from COTATION --> Moyenne des cours de clôture sur les 5 derniers jours, par société RANK,DENSE_RANK Fonc9onanaly9que,doncàu9liserdansune expressionanaly9que Rank)donnelerangd unenregistrementà l intérieurdesongroupecfclausedepar99on)en fonc9ondel ordredéfinicfclaused ordre) aveclafonc9onrank),sʼilya2tuplesquiontles mêmesvaleursetsontclassésderangn,letuple suivantestderangn+2.avecdense_rank)letuple suivantalerangn+1. TablePOPULATIONcountry,number) SELECT country, rank) OVER ORDER BY number DESC) AS n_rank FROM population Donnechaquepaysavecsonrangrang1pour lepluspeuplé). Lerésultatn estpastriéu9liseruneclause Orderbydansleselect)

10 NTILE Lafonc9onNTILEordonneleslignesenN paquetsdemêmetailleà1près),nétantun en9erpasséenparamètre. Laclauseorderbyestdoncobligatoire. NTILErenvoiepourchaquelignelenumérodu paquetauquelcepeligneappar9ent. SELECT last_name, salary, NTILE4) OVER ORDER BY salary DESC) AS quartile FROM employees WHERE department_id = 100; Commeilya6lignes,et6n estpasdivisiblepar4,lespaquets3 et4ont1lignedemoinsquelespaquets1et2. Last_name) salary) quarule) Greenberg Faviet Chen Urman Sciarra Popp