Créer un référentiel client grâce à Talend MDM

Transcription

1 Créer un référentiel client grâce à Talend MDM Christophe Toum Product Manager Talend Connect 9 octobre 2014 Talend

2 Sommaire Connaissez-vous vos clients? MDM et réconciliation des données Le processus de réconciliation avec Talend MDM Démonstration Bilan et suite Talend

3 Connaissez-vous vos clients? DISSEMINATION des informations clients Dans les différentes LoB Dans les différents canaux d échange (web, mobile ) Dans les différents silos métier (commercial, support, opérations ) Talend

4 Réconciliation des données client Client Master dont toutes les données sont fiables Connaissance et profil client partagé par tous les métiers Assistance Espace Client Web Transactions Point de vente Contact : téléphone Historique des incidents Contentieux Contact : Parcours des offres Simulations Opt-in / opt-out Contact : adresse postale Historique des commandes Contact : carte de fidélité Profil d acheteur Talend

5 MDM et réconciliation des données Tous les styles de MDM impliquent une réconciliation de plusieurs sources Consolidation Registry 64% Réconciliation non intrusive des sources et stockage. Plutôt pour de l analytique / reporting. Batch ou fil de l eau. Réconciliation non intrusive des sources dans un système de cross-reference. À but analytique et opérationnel. Batch ou évènementiel. Coexistence Transactionnel Comme consolidation mais avec renvoi des enregistrements nettoyés/gouvernés aux sources. Evènementiel. MDM opérationnel. Réconciliation des sources puis création centralisée des nouveaux records. Totalement temps réel, totalement opérationnel. Talend

6 MDM et réconciliation des données Styles d implémentations classiques pour le domaine Client Consolidation Registry 64% Réconciliation non intrusive des sources et stockage. Plutôt pour de l analytique / reporting. Batch ou fil de l eau. Réconciliation non intrusive des sources dans un système de cross-reference. À but analytique et opérationnel. Batch ou évènementiel. Coexistence Transactionnel Comme consolidation mais avec renvoi des enregistrements nettoyés/gouvernés aux sources. Evènementiel. MDM opérationnel. Réconciliation des sources puis création centralisée des nouveaux records. Totalement temps réel, totalement opérationnel. Talend

7 Le processus de réconciliation Intégration Correction Rapprochement Consolidation des données Redressement Dédoublonnage Intendance Connexion aux sources hétérogènes Chargement initial en masse Nouvelles données ou mises à jour au fil de l eau (évènementiel, service) Complète, reformate Standardise : titres de civilité, prénoms, téléphones, adresses postales etc. Regroupe / lie les enregistrements similaires Algorithme de comparaison approchée, score de vraisemblance Consolide le «golden record» Merge automatique Vérification et correction manuelle («stewardship») Capture Nettoie Unifie Certifie Plateforme Talend MDM Talend

8 Architecture de réconciliation Composants T-Swoosh Algorithme séquentiel de rapprochement & consolidation Par similarité et scores Staging Area Master Area Données sources redressées, standardisées, puis regroupées/reliées Espace de traitement Stewardship Tables Tâches de stewardship «Lignage» de la consolidation Golden record consolidé Espace de gouvernance: validations, enrichissements, workflows Talend

9 Architecture de réconciliation Flux 2 Match & Merge Rematch & Remerge 1 Nouvelle données, mise à jour Batch ou fil de l eau Staging Area 3 Détail de la consolidation Consolidations à vérifier/valider 4 5 Envoi en master Règles de validation Enrichissements automatiques Visualisation, correction du «lignage» Master Area Stewardship Tables Talend

10 Architecture de réconciliation Interfaces graphiques WEB UI MDM Préparation des données Suivi des traitements Traitement des rejets Gestion des faux rapprochements Consolidations zmanuelles Audit du «lignage» Recherche, navigation Intendance des données Staging Area Master Area Stewardship Tables Talend

11 Réglage de l intendance manuelle Candidats à la consolidation 100% 98,3% Zone de consolidation automatisée William Morris Key = 1234 SAP 97% Seuil de consolidation automatique Consolidations à vérifier, corriger ou rejeter Ajustement plus haut = moins de rapprochements abusifs mais plus d intendance manuelle 85% Seuil de consolidation manuelle Ajustement plus bas = moins de rapprochements manqués mais risque de rapprochements abusifs William F. Morris Key = ABCD Call Center Pas de consolidation, les enregistrements sont distincts Bill Morris Key = XYZ SF.com 0% Talend

12 «Lignage» des Master clients Staging Forward lineage Cross-ref Reverse lineage Master William Morris Key = 1234 SAP William F. Morris Key = ABCD Call Center Registry Group UID Id in model Source 344ec SAP 344ec047 ABCD CC 344ec047 XYZ SF Détail de la consolidation au champ près William Morris Key = 344ec047 MDM Bill Morris Key = XYZ SF.com Talend

13 DEMO Talend

14 Ce que nous avons vu Le rapprochement des données client Repose sur un algorithme puissant (mais il n y a pas de raison pour que ça rende les choses compliquées) Doit permettre une intendance manuelle à tous les niveaux pour voir, corriger, défaire Doit rester traçable dans les deux sens Talend

15 Ce que nous n avons PAS vu Intégration et mise en qualité des données La connectivité aux sources hétérogènes Le traitement des formats disparates L ingestion des données au fil de l eau, via queue de messages, service REST ou SOAP L alignement des structures, des formats La standardisation des données Talend

16 Merci de votre attention Talend MDM - Modélisation multi-domaine - Plateforme unfiée de Data Management - Réconciliation des données intégrée Contact us: info@talend.com Learn more: Talend

17 Talend Cloud est à venir Obtenez un accès anticipé à talend.com/cloud Talend