Créer un référentiel client grâce à Talend MDM Christophe Toum Product Manager Talend Connect 9 octobre 2014 Talend 2014 1
Sommaire Connaissez-vous vos clients? MDM et réconciliation des données Le processus de réconciliation avec Talend MDM Démonstration Bilan et suite Talend 2014 2
Connaissez-vous vos clients? DISSEMINATION des informations clients Dans les différentes LoB Dans les différents canaux d échange (web, mobile ) Dans les différents silos métier (commercial, support, opérations ) Talend 2014 3
Réconciliation des données client Client Master dont toutes les données sont fiables Connaissance et profil client partagé par tous les métiers Assistance Espace Client Web Transactions Point de vente Contact : téléphone Historique des incidents Contentieux Contact : email Parcours des offres Simulations Opt-in / opt-out Contact : adresse postale Historique des commandes Contact : carte de fidélité Profil d acheteur Talend 2014 4
MDM et réconciliation des données Tous les styles de MDM impliquent une réconciliation de plusieurs sources Consolidation Registry 64% Réconciliation non intrusive des sources et stockage. Plutôt pour de l analytique / reporting. Batch ou fil de l eau. Réconciliation non intrusive des sources dans un système de cross-reference. À but analytique et opérationnel. Batch ou évènementiel. Coexistence Transactionnel Comme consolidation mais avec renvoi des enregistrements nettoyés/gouvernés aux sources. Evènementiel. MDM opérationnel. Réconciliation des sources puis création centralisée des nouveaux records. Totalement temps réel, totalement opérationnel. Talend 2014 5
MDM et réconciliation des données Styles d implémentations classiques pour le domaine Client Consolidation Registry 64% Réconciliation non intrusive des sources et stockage. Plutôt pour de l analytique / reporting. Batch ou fil de l eau. Réconciliation non intrusive des sources dans un système de cross-reference. À but analytique et opérationnel. Batch ou évènementiel. Coexistence Transactionnel Comme consolidation mais avec renvoi des enregistrements nettoyés/gouvernés aux sources. Evènementiel. MDM opérationnel. Réconciliation des sources puis création centralisée des nouveaux records. Totalement temps réel, totalement opérationnel. Talend 2014 6
Le processus de réconciliation Intégration Correction Rapprochement Consolidation des données Redressement Dédoublonnage Intendance Connexion aux sources hétérogènes Chargement initial en masse Nouvelles données ou mises à jour au fil de l eau (évènementiel, service) Complète, reformate Standardise : titres de civilité, prénoms, téléphones, adresses postales etc. Regroupe / lie les enregistrements similaires Algorithme de comparaison approchée, score de vraisemblance Consolide le «golden record» Merge automatique Vérification et correction manuelle («stewardship») Capture Nettoie Unifie Certifie Plateforme Talend MDM Talend 2014 7
Architecture de réconciliation Composants T-Swoosh Algorithme séquentiel de rapprochement & consolidation Par similarité et scores Staging Area Master Area Données sources redressées, standardisées, puis regroupées/reliées Espace de traitement Stewardship Tables Tâches de stewardship «Lignage» de la consolidation Golden record consolidé Espace de gouvernance: validations, enrichissements, workflows Talend 2014 8
Architecture de réconciliation Flux 2 Match & Merge Rematch & Remerge 1 Nouvelle données, mise à jour Batch ou fil de l eau Staging Area 3 Détail de la consolidation Consolidations à vérifier/valider 4 5 Envoi en master Règles de validation Enrichissements automatiques Visualisation, correction du «lignage» Master Area Stewardship Tables Talend 2014 9
Architecture de réconciliation Interfaces graphiques WEB UI MDM Préparation des données Suivi des traitements Traitement des rejets Gestion des faux rapprochements Consolidations zmanuelles Audit du «lignage» Recherche, navigation Intendance des données Staging Area Master Area Stewardship Tables Talend 2014 10
Réglage de l intendance manuelle Candidats à la consolidation 100% 98,3% Zone de consolidation automatisée William Morris Key = 1234 SAP 97% Seuil de consolidation automatique Consolidations à vérifier, corriger ou rejeter Ajustement plus haut = moins de rapprochements abusifs mais plus d intendance manuelle 85% Seuil de consolidation manuelle Ajustement plus bas = moins de rapprochements manqués mais risque de rapprochements abusifs William F. Morris Key = ABCD Call Center Pas de consolidation, les enregistrements sont distincts Bill Morris Key = XYZ SF.com 0% Talend 2014 11
«Lignage» des Master clients Staging Forward lineage Cross-ref Reverse lineage Master William Morris Key = 1234 SAP William F. Morris Key = ABCD Call Center Registry Group UID Id in model Source 344ec047... 1234 SAP 344ec047 ABCD CC 344ec047 XYZ SF Détail de la consolidation au champ près William Morris Key = 344ec047 MDM Bill Morris Key = XYZ SF.com Talend 2014 12
DEMO Talend 2014 13
Ce que nous avons vu Le rapprochement des données client Repose sur un algorithme puissant (mais il n y a pas de raison pour que ça rende les choses compliquées) Doit permettre une intendance manuelle à tous les niveaux pour voir, corriger, défaire Doit rester traçable dans les deux sens Talend 2014 14
Ce que nous n avons PAS vu Intégration et mise en qualité des données La connectivité aux sources hétérogènes Le traitement des formats disparates L ingestion des données au fil de l eau, via queue de messages, service REST ou SOAP L alignement des structures, des formats La standardisation des données Talend 2014 15
Merci de votre attention Talend MDM - Modélisation multi-domaine - Plateforme unfiée de Data Management - Réconciliation des données intégrée Contact us: info@talend.com Learn more: www.talend.com Talend 2014 16
Talend Cloud est à venir Obtenez un accès anticipé à talend.com/cloud Talend 2014 17