Méthodes mixtes en évaluation Combinaison des méthodes m qualitatives et quantitatives Pierre Pluye MD PhD Département de médecine m familiale Université McGill INPES Paris - 11 avril 2008
Méthodes mixtes en évaluation: Plan 12:00-12:30 12:30 Présentation Lecture & Livre de référencer rence Introduction & Justification Conceptualisation & Devis Intégration & Qualité Exercice: Projet individuel 13:15-14:00 14:00 Débat D (facultatif) 14:00-14:45 14:45 Exercice Présentation des projets individuels & vote Amélioration du projet d éd équipe Projets d éd équipe: Commentaire & question
12:00-12:30 12:30 Présentation Lecture Péladeau, N. & Mercier, C. (1993). Approches qualitative et quantitative en évaluation de programmes. Sociologie et Sociétés,, 25(2):112-124. 124.?? Recherche évaluative & enseignement Creswell, J.W. & Plano Clark, V.L. (2007). Designing and conducting mixed methods research. London: Sage.
Méthodes mixtes: Introduction Combinaison des méthodes qualitatives et quantitatives Pratique: Depuis longtemps Récemment conceptualisée en termes de méthodes mixtes (premier handbook publié en 2003)
Méthodes mixtes: Introduction Publication dans le domaine de la santé Plus fréquemment sur des études quantitatives Moins fréquemment sur des études qualitatives Rarement sur des études mixtes Composantes qualitatives et quantitatives souvent publiées sépars parément Abbreviations QUAN + QUAL: Concomitance & importance égale QUAL quan: Succession & importance inégale QUAN (qual): Insertion
Méthodes mixtes: Introduction QUAL Communication & Information Analyse de discours Analyse de contenu qualitative Sémiotique Idéaux-types & «Patterns» Analyse des évènements Théorisation ancrée Étude de cas qualitative Actions sociales Herméneutique Historio(bio)graphie Phénoménologie Société & Interactions Sociales Ethnographie Ethnométhodologie Interactionnisme symbolique QUAN Études expérimentales Essai contrôlé randomisé Essai contrôlé Essai contrôlé avant-après Études observationnelles Étude de Cohorte Étude de comparaison de cas Étude avant-après & séries temporelles Enquête transversale Série de cas Rapport de cas QUAL et\ou QUAN Recherche-action ou recherche participative
Méthodes mixtes: : Justification Très s populaires en évaluation: Synergie des forces des méthodes m qualitatives et quantitatives QUAL Description de phénom nomènes nes sociaux complexes (par ex. interventions en promotion de la santé) Résultats spécifiques (contexte d implantation) d Leçons transférables rables (autres contextes) QUAN Relations causales ou descriptions généralisables g (inférences statistiques) Exemple QUAN: Programme bien implanté à A vs. mal à B? QUAL: Mieux comprendre les diverses implantations
Méthodes mixtes: : Justification Nécessité Amélioration Besoins 7 raisons pour combiner QUAL & QUAN Informations (données) QUAL amélior liorées par QUAN Informations (données) QUAN amélior liorées par QUAL Méthode QUAL insuffisante Méthode QUAN insuffisante Besoin de généraliser g des résultats r QUAL par QUAN Besoin d interprd interpréter des résultats r QUAN par QUAL Besoin d explorer d et d expliquer d (QUAL & QUAN) Creswell & Plano-Clark, 2007
Méthodes mixtes: : Conceptualisation QUAL Exploration & interprétation QUAN Explication & causalité QUAL (par ex. explorer & mesurer) QUAN QUAL (par ex. interpréter Ethnographie, phénoménologie, ethno-méthodes, théorisation ancrée, études de cas Expérience, action sociale et interactions sociales (mots, sons, images) QUAN facteurs-résultats ) Biostatistiques Epidémiologie Statistiques (chiffres, mesure)
Méthodes mixtes: : Conceptualisation D après s Johnson 2007 Journal of Mixed Methods Research
Méthodes mixtes: Projet d : Projet d évaluation Problème(s) Objectif général Question(s) spécifique(s)?
Méthodes mixtes: Projet d : Projet d évaluation Problème(s) Différence entre situation actuelle et souhaitée Par ex. mauvaise implantation au site B Objectif général Contribution attendue de l évaluation Par ex. mieux comprendre l implantation Question(s) spécifique(s) Qui? Quoi? Pourquoi? Comment? Oủ? Par ex. Comment l intervention est-elle implantée (tous les sites)? Quelle est la perspective des intervenants (sites + vs. +\- vs. -)?
Méthodes mixtes: : Exercice Formez 5 équipes de 10 Chaque équipe désigne d 1 modérateur Le modérateur distribue les feuilles d exerciced Résumez votre projet individuel Recevez 1 feuille d exercice d (numéro personnel) Répondez aux questions 1, 2 et 3 en 5 minutes Si vous utilisez les méthodes m mixtes en évaluation Si vous évaluez des interventions ou programmes Si vous travaillez pour des interventions ou programmes Soyez SIMPLE & LISIBLE (mini-affiche)
Méthodes mixtes: Devis d : Devis d évaluation TYPES DE DEVIS EXPLORATION QUAL quan EXPLICATION QUAN qual DESCRIPTION Évaluation qualitative puis quantitative (consécutives). Intégration entre les deux phases. Par ex. développement d instruments ou de taxonomies. Évaluation quantitative puis qualitative (consécutives). Intégration entre les deux phases. Par ex. suivi & sélection de cas.
Méthodes mixtes: Devis d : Devis d évaluation TYPES DE DEVIS INSERTION QUAL(quan) QUAN(qual) TRIANGULATION QUAL+QUAN DESCRIPTION Évaluations qualitative et quantitative concomitantes. Intégration au moment de la collecte et\ou de l analyse. Par ex. étude ethnographique au sein d une expérimentation. Évaluations qualitative et quantitative concomitantes. Intégration au moment de la collecte et\ou de l analyse. Exemples: Convergence, transformation, validation, analyses multi-niveaux.
Méthodes mixtes: : Intégration Exploration & Explication (consécutives) cutives) Analyse des informations (données) QUAL (par ex. cadre conceptuel et thèmes) et collecte- analyse QUAN (par ex. instrument) Analyse des informations (données) QUAN (par ex. cas extrêmes) et collecte-analyse QUAL (par ex. comparaison des cas)
Méthodes mixtes: : Intégration Insertion & triangulation (concomitantes) Analyse sépars parée e des informations (données) qualitatives et quantitatives & comparaison des résultats (par ex. tableau QUAN vs. QUAL) Transformation & fusion des informations (bases de données): Par ex. quantification
Méthodes mixtes: : Exercice Continuez votre projet individuel (le même m me projet & la même m me feuille ) Répondez aux questions 4, 5, 6 et 7 en 5 minutes Soyez SIMPLE & LISIBLE (mini-affiche)
En cas de divergence QUAL vs. QUAN: Qualité? Acceptable Contradictions ou données incomplètes Comparaison EXCLUSION Inconsistences Interpretation ou re-analyse RECONCILIATION Nuances & complexité Ex. nouveau cadre conceptuel Différences Ex. résultats extrêmes BRACKETING Ex. Scenarios meilleur\pire Conflits Collecte-analyse de données additionnelles INITIATION Ex. nouveau cadre conceptuel
Méthodes mixtes: Qualité Creswell & Plano Clark (2007) Description quan-qual qual-mm problème, objectif et question Revue de littérature : Tout type d éd évaluation (quan, qual, mm) Devis MM (exploration, explication, insertion, triangulation) Qualité de collecte et d analyse d de données QUAN & QUAL (appropriée e pour chaque composante diapositive suivante) Intégration des informations (données) QUAN & QUAL Interprétation tation of QUAN & QUAL & MM evidence Discussion des limites QUAN & QUAL & MM Expertise en évaluation & méthodes m QUAN & QUAL
Méthodes mixtes: : Qualité Éléments mixtes Approche mixte Devis mixte Composante(s) qualitative(s) Composante(s) quantitative(s) expérimentale(s) Composante(s) quantitative(s) observationnelle(s) Technique(s) mixte(s) Objectifs/questions qualitatives Approche/méthode qualitative Description du contexte Description des participants Collecte-analyse systématique des données qualitatives Réflexivité des évaluateurs sur la méthode et l interprétation des résultats Randomisation Randomisation à l aveugle Faible taux d abandon Sélection appropriée des participants Mesure appropriée Contrôle des variables confondantes
Merci Débat 13:15-14:00 14:00 Exercice 14:00-14:45 14:45
Exercice 14:00-14:45 14:45
Méthodes mixtes: : Exercice Reformez 5 équipes de 10 Même équipe & même m me modérateur Le modérateur distribue les bulletins de vote (1 chacun) Présentez vos projets & votez (15 minutes) Affichez votre projet avec ceux de l él équipe Évaluez les mini-affiches de VOTRE équipe Répondez aux questions des membres de votre équipe Posez des questions aux membres de votre équipe Votez pour 1 projet d éd équipe Donnez votre bulletin au modérateur Discutez & améliorez le projet d éd équipe (15 )
Méthodes mixtes: : Exercice Mise en commun des projets d éd équipe (15 ) Synthèse Commentaire Question
Merci pierre.pluye@mcgill.ca