Méthodologie : recueil et analyse des données

Transcription

1 UE Méthodologie- Master2 PIF-DSN Méthodologie : recueil et analyse des données Patricia Marzin-Janvier

2 Méthodologie!! «La méthodologie caractérise les moyens que l on prévoit de se donner (a priori) pour prouver ce qu on avance, ou au moins pour inscrire ce qu on propose dans la réalité, qu elle soit ou non construite, l interprétation ne pouvant se faire qu à l intérieur du cadre de référence où on est placé» (Robert, 1992, R.D.M., 12/1) 2!

3 Conception d'une expérimentation 1- Types d'objet de recherche 2- Type de situation expérimentale 3- Type de recueil de données 4- Organisation de l'expérimentation

4 Types d'objet de recherche Noosphère Rapport institutionnel au savoir Savoir Ingénierie didactique Relations au savoir de l'apprenant Enseignant Apprenant Pratiques enseignantes Catégories non disjointes Objets de recherche souvent mixtes Usages 4!

5 Types de situation expérimentale Situation de classe modifiée Situation de classe non modifiée Situation hors classe créée Situation hors-classe pré-existante 5!

6 Situation expérimentale / Objet de recherche Situation de classe modifiée Ingénierie didactique Etude du contrat didactique Etude d'usages Etude des pratiques enseignantes Situation hors classe créée Etude d'usages Etude des pratiques enseignantes Situation de classe non modifiée Etude d'usages Etude des pratiques enseignantes Etude des relations au savoir de l'apprenan Etude du contrat didactique Situation hors-classe pré-existante Etude du rapport institutionnel au savoir Etude des relations au savoir de l'apprenant 6!

7 Type de recueil de données Données écrites Questionnaires / Tests Données orales/visuelles Entretiens Productions d'élèves Traces informatiques de l'activité des élèves (EIAH) Observations de classe (notes, enregistrements audios et vidéos, ) Autres documents (programmes, supports d'enseignement (manuels, ressources papiers et/ou numériques...) 7!

8 Type de recueil de données Données écrites : questionnaire Questionnaires à questions ouvertes Questionnaires à questions fermées Q Sort QCM Technique d'association d'idées Avantage : simple et rapide très employé Le dépouillement peut se faire automatiquement Inconvénients : nombreuses limites dont l'utilisateur n'est pas toujours conscient 8!

9 Type de recueil de données Données écrites Questionnaires / Tests Productions d'élèves Traces informatiques de l'activité des élèves Autres documents (programmes, supports d'enseignement (manuels, ressources papiers et/ou numériques...) 9!

10 Type de recueil de données Données Orales Entretiens Observations de classe 10!

11 Type de recueil de données Données orales : entretiens Directif Semi-directif Libre Grille d'entretien / magnétophone, camescope / prise de notes Avantage : utilisables dans des situations de recherches variées. Permet de s'adapter au niveau du sujet. Réponses approfondies, nuancées, personnelles Inconvénients : grand consommateur de temps (entretien + transcription) Formation de l'enquêteur (entretien d explicitation par ex.) 11!

12 Type de recueil de données Données orales/gestuelles : observations de classe Notes d'observation / magnétophone, camescope Avantage : repérer les comportements, actes et gestes. Inconvénients : grand consommateur de temps (entretien + dépouillement). Presence de l'observateur peut induire un biais. 12!

13 Objet de recherche / Recueil de données Productions d'élèves Traces informatiques de l'activité des élèves Ingénierie didactique" Etude des relations au savoir de l'apprenant Entretiens Observations de classe Questionnaires / Tests Etude des pratiques enseignantes Etude d'usages Etude du rapport institutionnel au savoir Autres documents (programmes, supports d'enseignement...) 13!

14 Objet de recherche / Recueil de données Productions d'élèves Traces informatiques de l'activité des élèves Ingénierie didactique Etude des relations au savoir de l'apprenant Entretiens Etude des pratiques enseignantes / Etude d'usages Observations de classe Questionnaires / Tests Etude du rapport institutionnel au savoir Autres documents (programmes, supports d'enseignement...) 14!

15 Organisation d'une expérimentation 1- Conception L'expérimentation est souvent une composition de plusieurs objets de recherche, situations expérimentales et recueil de données Croiser différentes approches qui sont complémentaires - qualitative /quantitative - ponctuel/ longue - globale / détail 15!

16 Organisation d'une expérimentation 1 - Conception de l expérimentation 2 - Mise en place et déroulement des recueils de données 3 - Dépouillement des données 4 - Traitement des données 5 - Interprétation des résultats 6 - Evaluation de l expérimentation / Contrôle 16!

17 Organisation d'une expérimentation 1- Conception Problématique Cadre théorique Questions de recherche Hypothèses Objets de recherche Prévoir le recueil de données 17!

18 Résultat! ««Un résultat» en didactique est un bloc qui comprend des analyses de données empiriques saisies dans un cadre théorique explicatif, et c est ce bloc, et lui seul, qui est doté éventuellement d une certaine stabilité dans des contextes semblables» (Johsua 1996, R.D.M. 16/2) 18!

19 Etude de pratiques enseignantes!! Cadre théorique : TSD et TAD!! Questions de recherche!! Q1 : Est-ce que les facteurs identifiés a priori sont-ils des facteurs décisionnels?!! Q2 : Comment interviennent les facteurs dans les décisions didactiques selon les différents niveaux de la structuration du milieu et selon l échelle de codétermination?!! Analyse menée en maths et en SVT selon la même méthodologie,! 19!

20 20!

21 Les facteurs de décision!! Facteurs épistémiques!! Facteurs de l histoire didactique! 21!

22 Les facteurs épistémiques!! L adjectif «épisteḿique» renvoie a tout ce qui nourrit le rapport personnel de l enseignant au savoir enjeu d enseignement.!! Enseignement et apprentissage : Connaissances de l enseignant sur la pédagogie vis à vis de l objet à enseigner (ou plus haut) et sur la façon dont on apprend. Comment on apprend et donc comment on enseigne : par l activité, la résolution de problèmes, l investigation, la répétition, l imitation, les erreurs, le dialogue, etc., c est-à-dire les différentes idéologies qui circulent dans une société à un moment donné et qui peuvent refléter différentes théories d apprentissage.!! Communauté de pratique : connaissances de l enseignant sur comment les autres collègues traitent l objet à enseigner.!! Discipline : domaine ou secteur (niveaux de codétermination) dont l objet à enseigner (O) fait référence : connaissances du professeur sur la discipline (connaissances hors de l institution d enseignement).!! Institution : connaissances de l enseignant sur le rapport de l institution à l objet à enseigner (O) (programmes, ressources).! 22!

23 Les facteurs de l histoire didactique!! Les facteurs de cette catégorie se réfèrent a l histoire partagée entre l élève et l enseignant a propos du savoir enjeu d enseignement (ou objet d enseignement O), sous les conditions et contraintes de l institution.!! Mémoire Inter-élève : Ce sous-facteur se décline lui-même en deux sous-facteurs : mémoire inter-élève de la classe cible (mémoire interélève instanciée à une classe particulière) ou mémoire inter-élève de la classe générique (non instanciée à une classe).!! Mémoire Intra-élève : L histoire intra-élève fait référence aux caractéristiques d un élève en particulier.! 23!

24 Plan expérimental projet ADDI! 24!

25 Conception d une expérimentation!! La mise en évidence des facteurs s appuie sur un cadre théorique bien identifié!! Le recueil des données est prévu et anticipé (journal de bord)!! L expérimentation a pour but de valider la définition des facteurs et à les mettre en évidence lors de la préparation d une séquence de cours! 25!

26 Analyse d un journal de bord!! Retrouver des facteurs de décision de l enseignant (jusqu à TP1)! 26!

27 Conception d une prestructuration avec Copex! 27!

28 Questions de recherche!! La pré-structuration d un protocole permet-elle de prendre en compte les difficultés des élèves identifiées a priori?!! Existe-t-il différents niveaux de pré-structuration, et peuvent-ils être implémentés dans la plateforme LabBook?! 28!

29 Méthodologie! Analyse épistémologique des concepts! Difficultés a priori" Catégories! Construction de la praxéologie de référence! - Concepts - T à fondamentaux! l origine de difficultés identifiées - Techniques a priori" de laboratoire! - Démarche - T à la expérimentale! charge de l élève! Préstructuration! Analyse institutionnelle (manuels, programmes )! 29!

30 Méthodologie! Transposition du modèle praxéologique dans le logiciel Copex! Type de tâche générique! Etapes du protocole! /s Type de tâche ou tâche! Actions du protocole! Paramètres! de tâches! Difficultés " a priori" Liste de paramètres au choix! 30!

31 Résultats! N1: étapes imposées et actions/justifications libres 26!

32 Résultats! N2: étapes imposées, actions structurées et justifications libres 27!

33 Résultats! N3: étapes imposées et actions/justifications structurées 28!

34 Organisation d'une expérimentation 2- Mise en place - Déroulement Contexte de l expérimentation : - population testée - mode de passation (questionnaires et tests) - (compte-rendu d expérimentation) Mode de passation = conditions pour les élèves : durée, organisation, consignes,... Conditions matérielles de l'expérimentation : - rôle de chacun des acteurs, gestion du matériel, organisation temporelle,... 34!

35 Dépouillement des données 1- Retranscription des données à Données audio et vidéo 2- Sélection des données 3- Classement préliminaire des données

36 Retranscription écrite des données audio (vidéo) Format à Tableau n intervention Indicateur de temps Code locuteur Texte de l intervention Commentaire Numéroter de 1 à 124 à repérer l intervention - Heure 15h32 - Minutage 92mn - n sur le compteur du magnétophone 0824 à corrélation temporelle avec des notes expérimentales - A (étudiant A) - Arthur - E (enseignant) - etc - Paroles prononcées par le locuteur : Mais t as dis que - Actions ou commentaires : (B ferme la porte) à CODAGE Éventuellement B ferme la porte E manipule l oscillo Appareil en panne à Tirées éventuellement des notes expérimentales

37 Retranscription écrite des données audio et vidéo CODAGE Exemple : modèle DRED (Gric-COAST : ) / pause (silence verbal) inférieur à 2 sec + pause d environ 5 sec ++ pause d environ 10 sec (?) pour une question (.) pour une affirmation (?) pour les paroles inaudibles (omissions, pb d écoute, ) pour le discours interrompu par l autre locuteur 37!

38 Dépouillement des données 1- Retranscription des données à Données audio et vidéo 2- Sélection des données 3- Classement préliminaire des données 38!

39 Sélection des données Éliminer les données de mauvaise qualité, inutiles ou problématiques (inexploitables) Exemples : - on a perdu les références de l enregistrement : quel groupe? Quel jour? prévoir des dossiers pré-nommés (groupe, date, ) - enregistrement de trop mauvaise qualité (bruit, panne, effacement) - Données pauvres, feuilles blanches Prévoir les étiquettes + info utiles Vérifier le matériel! - Données utiles : choisir de ne traiter que le(s) enregistrements les plus riches en données (à en vue d une analyse fine) " Création d un corpus initial de données : «données brutes» ( = non traitées) Caractériser le corpus 39!

40 Dépouillement des données 1- Retranscription des données à Données audio et vidéo 2- Sélection des données 3- Classement préliminaire des données 40!

41 3- Classement préliminaire des données Critères de classement fréquent : suivant les conditions d expérimentation Exemple : classement suivant test, jour, classe, groupe, type de données,. 41!

42 Traitement des données 1- Catégorisation des données 2- Traitement des données codées 3- Diversifier les traitements des données 42!

43 Catégorisation des données Définir des critères de catégories / en relation avec la grille d analyse (analyse a priori, puis évolution) à codage des données Codage des données à classement des données à préparation des données pour - traitement numérique (statistique, calculs, ) - représentation (graphique, ) - (autres traitements) 43!

44 Traitement des données Traitement des données codées (traitement numérique ou non) à Création d un ensemble de «résultats bruts» (non interprétés, mais préparés en vue d une interprétation) 44!

45 Analyse de pratique enseignante!! Catégorisation du discours d enseignants! 45!

46 Traitement des données «Résultats bruts» = interprétables à préparer l étape suivante = interprétation Diversifier le traitement des données Faire plusieurs traitements à fournir des points de vue que l on peut croiser (points de vue variés, complémentaires, contradictoires) à enrichir, conforter l interprétation, enrichir une vision critique, les capacités de contrôle 46!

47 Représentation des résultats Rendre compte des résultats à Qualité de présentation = Support pour l interprétation des résultats (pas seulement pour exposer, rendre compte) Diversifier les représentations à fournir des points de vue que l on peut confronter (points de vue variés, complémentaires, contradictoires) à enrichir, conforter ou non une interprétation 47!

48 Interprétation des résultats S appuie sur le traitement des données sur sa qualité sur sa diversité Analyse a posteriori à Corriger compléter enrichir la grille d analyse (obtenue initialement par l analyse préalable) mais aussi : modifier le corpus (sélection), un traitement, 48!

49 Interprétation des résultats S appuie sur la diversité du traitement des données Analyse qualitative Analyse quantitative 2 approches complémentaires Peu de données Beaucoup de données Beaucoup d item Peu d item (précisément définis) Finesse et détails Vision plus générale Exemple - analyse statistique complétée par quelques études de cas - questions fermées + demandes de justification (ouvertes) 49!

50 Contrôles de l expérimentation A toutes les étapes de l expérimentation à Recueil, dépouillement, traitement, interprétation, Se donner des moyens de contrôle Exemples - définir précisément les critères de catégories - utiliser un échantillon témoin (Ingénieries) - croiser les résultats de diverses origines des représentations diverses des mêmes données des traitements, des codages. - 50!