Évaluation avec Sakai

Évaluation avec Sakai E.DUQUENOY/F.DOOREMONT Novembre 2014

Table des matières Objectifs 3 1 - L'outil "Devoirs évalués" 4 1.1 Présentation...4 1.2 Création d'un devoir et mise à disposition dans l'outil Leçon...5 2 - Création rapide de tests et quiz 7 2.1 Création rapide d'un exercice à trous avec notation automatique...7 2.1.1 Exercices à trous...7 2.2 Création rapide d'un exercice à choix (multiple, unique, vrai/faux) avec notation automatique...7 2.2.1 Questionnaire à choix multiples, à choix unique, vrai/faux...7 2.3 Création rapide d'un exercice de type "question ouverte" avec notation automatique...8 2.3.1 Questions ouvertes...8 2.4 Création rapide d'un test en ligne avec notation automatique...8 2.5 Les réglages de l'outil Tests et Quiz...8 3 - Réalisation de sondages avec l'outil Tests & Quiz. 10 3.1 Créer un sondage avec l'outil Tests & Quizzes...10 3.1.1 Réalisation rapide d'un sondage...10 3.2 Réglages du sondages...12 3.3 Les sondages par matrice...16 4 - Outil Bulletin de notes 21 4.1 Utilisation du bulletin de notes...21 4.2 Alimentation du bulletin de notes...21 5 - Publier des notes et des commentaires individuels 23 5.1 Publication de tableaux...23 5.2 Publier des notes et des commentaires...24 6 - Le constructeur de "Tests et Quiz " 26 6.1 Les types de questions...26 6.2 Banque de questions...27 6.3 Création d'un test en ligne avec Tests et Quiz...28 2

Objectifs Outils principaux abordés : Tests & Quizzes, Devoirs évalués, Bulletin de notes et Bulletin de liaison (ancienn. Post'Em) Thèmes abordés : créer des devoirs et des questionnaires, créer une base de questions, comment dupliquer une question, utiliser le langage de création de questionnaires, etc. 3

1-1 L'outil "Devoirs évalués" 1.1 Présentation L'outil Devoirs évalués permet de créer des devoirs qui pourront être mis à la disposition des étudiants. Les réglages sont nombreux : dates de début et de fin de devoir type de soumission : fichiers ou en ligne nombre de remises Image 1 Réglages des dates dans l'outil Devoirs évalués échelle de notation (points, lettres, validation,...)... Il est également possible : d'envoyer les notes à l'outil Bulletin de notes,... de proposer le devoir à un ou plusieurs groupes plutôt qu'à l'ensemble des participants 4

L'outil "Devoirs évalués" Liste de devoirs dans l'outil "Devoirs évalués" 1.2 Création d'un devoir et mise à disposition dans l'outil Leçon Ce travail a pour objectif de créer un devoir à destination d'une partie des étudiants. Assurez-vous que l'espace Sakai dans lequel vous allez créer ce devoir : comporte au moins un groupe ou une section (cf. Groupes et sections.), dispose des outils Devoirs évaluées et Bulletin de notes Question 1 Créez un devoir : qui démarre maintenant et se termine dans 1/2h (de manière à pourvoir le tester avec un compte d'étudiant fictif) avec une échéance finale de 3/4h l'étudiant devra saisir une réponse en ligne et également déposer un fichier l'échelle de notation ira de 0 à 20 une nouvelle remise sera autorisée jusqu'au lendemain un engagement sur l'honneur sera affiché à l'étudiant lors de la notation, la note sera envoyée au bulletin de notes de Sakai le devoir sera destiné à un groupe unique d'étudiants une notification sera envoyée à l'étudiant au moment de la publication de la note L'outil Leçon permet de créer un parcours pédagogique dans lequel on peut insérer, par exemple, un devoir. Question 2 Placer votre devoir dans l'outil Leçon et faites le suivre d'un autre élément (une ressource en ligne par exemple) qui ne sera accessible que si l'étudiant a validé le devoir avec une note supérieur à 12, comme dans l'exemple suivant 5

L'outil "Devoirs évalués" Un devoir placé dans l'outil Leçon 6

2 - Création rapide de tests et quiz 2 Il s'agit ici de présenter l'outil Tests et Quiz de Sakai dans un mode de création rapide de QCM. Ces QCM pourront être utilisés dans des évaluations formatives (sans notation) ou sommatives (avec notation automatique) 2.1 Création rapide d'un exercice à trous avec notation automatique Généralités Quelque soit le type d'exercice, il est conseillé de commencer l'exercice par le mot Question. On peut ensuite le faire suivre, mais ce n'est pas obligatoire, du nombre de points entouré de parenthèses comme dans (2 points) 2.1.1 Exercices à trous Il suffit de saisir l'énoncé de la question comme par exemple : Donner la bonne conjugaison pour le verbe entre parenthèses au présent de l'indicatif : Je me (rendre) à Paris La réponse correcte est saisie sur la ligne suivante, précédée d'une étoile : *rends 2.2 Création rapide d'un exercice à choix (multiple, unique, vrai/faux) avec notation automatique Rappel Quelque soit le type d'exercice, il est conseillé de commencer l'exercice par le mot Question. On peut ensuite le faire suivre, mais ce n'est pas obligatoire, du nombre de points entouré de parenthèses comme dans (2 points) 2.2.1 Questionnaire à choix multiples, à choix unique, vrai/faux Les questionnaires à choix multiples et à choix unique sont très similaires, la différence entre les deux étant finalement effectuée par le logiciel en fonction du nombre de réponses correctes indiquées. Exemple L'énoncé suivant produit un exercice à réponses correctes multiples, les réponses correctes étant précédées d'une étoile : Question (2 points) Quels peuvent être les effets d'un filtre passe-bas sur un signal sonore? a.augmenter les hautes-fréquences *b.atténuer les hautes-fréquences c.atténuer les hautes-fréquences *d.augmenter les basses-fréquences 7

Création rapide de tests et quiz Exemple L'énoncé suivant produit un exercice à choix multiples, les réponses correctes étant précédées d'une étoile : Question (1 point) Quel était le vrai nom de Voltaire? a. Jean-Baptiste Poquelin b. Vernon Sullivan *c. François Marie Arouet Exemple L'énoncé suivant produit un exercice de type vrai/faux, la bonne réponse étant précédée d'une étoile : Question (1 points) La myxomatose est une maladie du lapin : *Vrai Faux 2.3 Création rapide d'un exercice de type "question ouverte" avec notation automatique Rappel Quelque soit le type d'exercice, il est conseillé de commencer l'exercice par le mot Question. On peut ensuite le faire suivre, mais ce n'est pas obligatoire, du nombre de points entouré de parenthèses comme dans (2 points) 2.3.1 Questions ouvertes Il est également possible de créer des questions ouvertes pour lesquelles vous pourrez récupérer la réponse de l'étudiant : Question (10 points) Traduire en français le texte espagnol suivant : "La población de las zonas que registren una radiactividad superior a 20 millisieverts tendrán que dejar sus casas. Un nuevo terremoto de magnitud 7,1 vuelve a sacudir la costa oriental del país. El presidente de Tepco, la compañía gestora, se desplaza a la zona para pedir perdón a los afectados" Il suffit de rédiger la question juste après la ligne comportant le mot Question et, éventuellement, la notation. 2.4 Création rapide d'un test en ligne avec notation automatique Cet exercice a pour but de présenter l'utilisation de l'outil Tests et Quiz de Sakai dans un mode de création rapide de QCM. Ces QCM pourront être utilisés dans des évaluations formatives (sans notation) ou sommatives (avec notation automatique) Généralités Quelque soit le type d'exercice, il est conseillé de commencer l'exercice par le mot Question. On peut ensuite le faire suivre, mais ce n'est pas obligatoire, du nombre de points entouré de parenthèses comme dans (2 points) Question Vous avez réalisé des exercices sur papier (téléchargez le fichier (cf. Exemple à adapter pour le langage de script)) et vous souhaitez maintenant les porter sur Sakai : modifiez les questions pour qu'elles puissent être acceptées par le langage de script de l'outil T&Q de Sakai. 8

Création rapide de tests et quiz 2.5 Les réglages de l'outil Tests et Quiz Les réglages de l'outil Tests et Quiz se répartissent en 4 catégories : la description de l'évaluation la disponibilité la notation l'apparence Définition : Description de l'évaluation Il est possible de saisir plusieurs informations qui apparaîtront à l'étudiant : titre, auteur, description, fichiers joints. Il est également possible de saisir des métadonnées qui ne seront pas visibles (destinées par exemple aux moteurs de recherche lorsque l'évaluation est publique) Définition dates d'apparition/disparition de l'évaluation, durée de l'évaluation, sécurité : adresses IP, identification secondaire, message de remise et redirection après la soumission. : Notation de l'évaluation Envoi au bulletin de note Retour d'expérience Définition Disponibilité de l'évaluation nombre de remises autorisées, Définition : Cible de l'évaluation : espace entier, groupes, ou utilisateurs anonymes, : Apparence Présentation de l'évaluation : sur une ou plusieurs pages web, avec ou sans retour en arrière numérotation des parties marque de révision couleurs et arrière plan 9

Réalisation de sondages avec l'outil Tests & Quiz. 3-3 3.1 Créer un sondage avec l'outil Tests & Quizzes L'outil Tests & Quizzes comporte un type de question «sondage» qui permet de réaliser des sondages d'opinion à plusieurs questions. Le résultat du sondage peut être rendu visible aux étudiants, sous forme graphique. Image 3 Une question de sondage telle qu'elle apparaît à un participant Les résultats d'un sondage à deux questions Remarque : Résultats Les résultats peuvent être exportés sous forme d'un fichier au format Excel. 3.1.1 Réalisation rapide d'un sondage Méthode Rendez-vous dans l'outil Tests & Quizzes (s'il n'apparaît pas, ajoutez-le en vous rendant dans Information du site puis Editer les outils) 10

Réalisation de sondages avec l'outil Tests & Quiz. 11

Réalisation de sondages avec l'outil Tests & Quiz. Saisie de la question et du type de réponse souhaitée. 3.2 Réglages du sondages Parmi les paramètres de réglages, les plus importants sont : l'affichage du résultat du sondage, l'anonymat ou non des participants au sondage 12

Réalisation de sondages avec l'outil Tests & Quiz. Méthode : Résultats du sondage Cliquez sur réglages (ou settings) : Réglages du questionnaire 13

Réalisation de sondages avec l'outil Tests & Quiz. Dans rétroaction, choisissez le mode d'affichage des résultats : Choix de l'élément à régler. Si vous souhaitez que les étudiants puissent visualiser immédiatement le résultat du vote après avoir soumis le leur, choisissez «Rétroaction à la soumission» puis en dessous de «Release Questions and the following», cochez la case Statistiques et histogrammes 14

Réalisation de sondages avec l'outil Tests & Quiz. Autoriser la visualisation des résultats du sondage Remarque Bien sûr, si vous ne souhaitez pas communiquer le résultat du sondage, vous pouvez choisir «Pas de rétroaction visible» Il est également possible de spécifier une date de publication des résultats en sélectionnant «Le retour d'expérience sera affiché à l'étudiant à une date spécifique» puis en saisissant une date valide. 15

Réalisation de sondages avec l'outil Tests & Quiz. Méthode : Anonymat Dans la liste déroulante située en face de votre questionnaire, sélectionnez réglages (ou settings) puis dans correction, choisissez entre «L'identité des étudiants peut être vue par les correcteurs», (l'identité des participants sera alors visible) ou «Correction anonyme seulement» (l'identité des participants ne sera pas visible) : Publication du sondage N'oubliez pas de publier votre sondage pour le rendre visible aux étudiants en cliquant sur «Enregistrer les réglages et publier» : Enregistrement et publication du sondage Si vous ne souhaitez pas publier votre sondage immédiatement, il suffit de cliquer sur «Enregistrer la configuration». 3.3 Les sondages par matrice L'outil Tests & Quizzes comporte un type de question «sondage - matrice de choix» qui permet de réaliser des sondages d'opinion à proposer sous forme d'une matrice de choix. Comme pour le type de question «sondage», Le résultat du sondage peut être rendu visible aux étudiants, sous forme graphique. 16

Réalisation de sondages avec l'outil Tests & Quiz. Exemple de questions réalisées avec le type "sondage - matrice de choix" 17

Réalisation de sondages avec l'outil Tests & Quiz. Comme pour les sondages de base, les résultats s'affichent sous forme graphique : Remarque : Intérêts de la matrice de choix permet de ne plus être limité en terme de variétés de réponses permet de poser plusieurs questions en une seule fois 18

Réalisation de sondages avec l'outil Tests & Quiz. la liste des intitulés de lignes et de colonnes : la taille relative intitulés de lignes / largeur des colonnes : Remarque La case à cocher «Ne permettre qu'une seule réponse par colonne» permet d'imposer un seul choix par colonne. 19

Réalisation de sondages avec l'outil Tests & Quiz. 20

4-4 Outil Bulletin de notes 4.1 Utilisation du bulletin de notes Fonctionnalités Cet outil permet la gestion des notes soit directement, l'enseignant saisit manuellement ou importe des notes à partir d'un fichier, soit automatiquement à partir des outils Devoirs évalués et Tests & Quizzes Il est possible de faire afficher, pour l'étudiant, les notes en pourcentages ou en points. La moyenne ne peut être affichée qu'en pourcentage. L'enseignant peut organiser ses notes en catégories (devoirs, travaux pratiques, etc.) et affecter chaque catégorie d'un coefficient. Les moyennes de chaque catégorie seront alors pondérées pour calculer la note finale. Exemple de bulletin vu par l'étudiant Dans l'exemple précédent, la note de cours (moyenne) est affichée en pourcentage (56,89%). L'étudiant a ici 3 notes réparties dans deux catégories (devoirs et travaux). Pour chaque catégorie, une moyenne est calculée : ce qui donne une moyenne pondérée (50% pour Travaux : ou encore 15,5% Puis la moyenne finale en tenant compte des pondération de chaque catégorie : soit une Remarque : Affichage de la note L'outil ne sait actuellement pas afficher la note finale en points (made in USA...). Exporter dans un fichier Il est possible de récupérer les notes dans un tableur. Pour cela : cliquez sur Toutes les notes cliquez sur l'un des boutons d'exportation (PDF, CSV ou XLS) choisissez éventuellement le groupe et la catégorie de notes qui vous intéressent (voir même l'étudiant, en saisissant son nom) 4.2 Alimentation du bulletin de notes Plusieurs outils peuvent alimenter le bulletin de notes : Tests et Quiz Devoirs évalués Leçon 21

Outil Bulletin de notes Forum Liaison LTI Scorm Player 22

Publier des notes et des commentaires individuels 5 - L'outil Bulletin de liaison (ancienn. individuels, saisis à partir d'un tableur. 5 Post'Em) permet la publication de notes et/ou de commentaires 5.1 Publication de tableaux L'outil intitulé Bulletin de liaison (ancienn. Post'Em), disponible dans les sites de type course et project, permet la publication rapide de tableaux issus de logiciels tel que Excel ou OpenOffice Calc. Il s'agit d'un outil proche du bulletin de notes, mais en beaucoup plus simple Intérêt de l'outil Imaginons que vous veniez de corriger des comptes-rendus de travaux pratiques et que vous vouliez transmettre les notes à chaque étudiant de manière individualisée (un étudiant ne voit pas les notes des autres étudiants) et personnalisée (vous souhaitez ajouter un petit commentaire à chacun). Il suffit de créer un tableau ressemblant à ceci : C'est-à-dire avec : une première colonne, obligatoire, qui comporte l'identifiant de l'étudiant (machi001 par exemple ou l'email si il s'agit d'un invité) Les colonnes suivantes peuvent contenir du texte ou des valeurs numériques. Remarque Il n'est absolument pas indispensable de créer cette liste manuellement (ouf!) : l'outil Liste d'étudiants (que vous aurez au préalable ajouté à votre site) permet de créer une liste (soit totale, soit à partir d'un groupe) au format Excel (.xls). Il est également possible d'ajouter d'autres tableaux, de mettre à jour ceux existants, de consultez (si vous êtes responsable du site) le tableau, etc. Méthode Ajoutez les outils Liste d'étudiants et Bulletin de liaison (ancienn. Post'Em) à votre site Récupérez une liste d'étudiants à partir de l'outil Liste d'étudiants Modifiez le tableau de manière à ce que les identifiants apparaissent dans la première colonne Complétez le tableau avec vos informations (notes, remarques, etc.) Exportez le tableau au format CSV Importez-le dans Bulletin de liaison (ancienn. Post'Em) Rappel La première colonne du tableau doit obligatoirement contenir les identifiants 23

Publier des notes et des commentaires individuels Complément : Macro d'exportation pour OpenOffice Calc Nous avons développé une macro, pour OpenOffice ou LibreOffice Calc, qui permet de réaliser une vrai exportation des fichiers CSV. Effet, le problème de Calc est que pour produire un fichier CSV, il faut utiliser la fonction d'enregistrement du logiciel (menu fichier puis enregistrer sous). Ce qui fait que, une fois l'enregistrement au format CSV effectué, le fichier ouvert reste à ce format, ce qui implique la perte des formules, du formatage des tableaux, des autres feuilles du tableau, etc. : lien (cf. Macro à installer dans OpenOffice Calc.) vers la macro d'exportation au format CSV. Vous pouvez également télécharger cette macro sur le site Formation à Sakai et à ses outils 1 5.2 Publier des notes et des commentaires L'objectif de cet exercice est de publier individuellement, à destination d'étudiants, des notes et des commentaires sur leurs travaux (réalisés ou non sur Sakai). Les outils à utiliser sont Bulletin de liaison (ancienn. Post'Em) (cf. Publication de tableaux p 23) et Liste d'étudiants Inscrire quelques étudiants Il existe des comptes d'étudiants permettant l'expérimentation de Sakai : etudiant1 à etudiant5 (mot de passe à demander à sakai@univ-littoral.fr2) Question 1 Inscrivez au moins deux étudiants Indice : En utilisant l'outil Information du Site Récupérer une liste d'étudiants Il s'agit maintenant de générer la liste d'étudiants qui sera importée dans le tableur Question 2 Importer une liste d'étudiants. Indice : En utilisant l'outil Liste d'étudiants Préparer le fichier pour l'exportation Lorsqu'on récupère une liste des étudiants, générée par l'outil Liste d'étudiants, la première colonne contient les noms (et prénoms) des étudiants. Il est nécessaire, pour le bon usage de l'outil Bulletin de liaison (ancienn. Post'Em), que la première colonne contienne les identifiants Question 3 Modifiez, dans le tableau, l'ordre des colonnes pour que l'identifiant soit la première colonne. Vous pouvez en profiter pour supprimer les participants qui ne vous seront pas utiles (responsable, tuteur, etc) ainsi que les colonnes Rôle et Courriel Créer quelques notes et/ou commentaires Il faut maintenant ajouter des notes ou des commentaires à chacun de vos étudiants. Question 4 Dans le tableur, créez deux nouvelles colonnes, avec les intitulés suivants (ce sont des exemples, vous pouvez en créer d'autres) : «note du devoir», «commentaires sur votre travail». Complétez les colonnes pour chaque étudiant avec des notes et des remarques et enregistrez le fichier. Indice : Il est nécessaire d'avoir quelques connaissances de base sur les tableurs Il s'agit maintenant d'enregistrer (ou d'exporter) le fichier au format CSV. Ce format de fichier permet de transformer un tableau (Excel ou OpenOffice Calc) en un fichier de textes où chaque ligne représente une ligne du tableau. Remarque importante : ce format CSV étant, pour la plupart des tableurs, considéré comme un format de sauvegarde et non d'exportation, une fois le fichier sauvegardé à ce format, les informations spécifiques aux tableurs, telles que les formules de calcul par exemple, disparaissent. C'est la raison pour laquelle il faut, avant la création du fichier CSV, enregistrer son fichier au format normal (.xls pour Excel et.ods pour OpenOffice). Une fois le fichier CSV créé, pensez à fermer le fichier puis rouvrez la version au format normal. 1 - http://sakai.univ-littoral.fr/access/content/group/de2223fd-a472-4548-8b7c-c2bcc1eb24f2/outils/macroexportsakai.oxt 2 - mailto:sakai@univ-littoral.fr 24

Publier des notes et des commentaires individuels Question 5 Exportez le fichier au format.csv (valeurs séparées par une virgule) Indice : Fichier puis Enregistrer sous Question 6 Chargez le fichier dans l'outil Bulletin de liaison (ancienn. Post'Em) Indice : Cliquez sur Ajouter Question 7 Vérifiez le fonctionnement en vous reconnectant sur Sakai à l'aide de l'un des comptes d'étudiants. 25

6-6 Le constructeur de "Tests et Quiz " 6.1 Les types de questions L'outil Tests et Quiz offre actuellement (version 10 de Sakai), 12 types de questions (10 pour Sakai 2.9) Image 4 Les différents types de questions dans "Tests et Quiz" Appariement Il s'agit de mettre en correspondance les éléments de deux listes Image 5 Appariement Sondages Voir la partie consacrée à ce type de questions (cf. Créer un sondage avec l'outil Tests & Quizzes p 10) Matrice de choix Voir la partie consacrée à ce type de questions (cf. Les sondages par matrice p 16) Réponse courte Il s'agit d'une question ouverte où l'étudiant répond en ligne Choix multiples Permet la réalisation de questions à base de choix multiples ou uniques, avec des options de : points négatifs pouvant être attribués en cas de mauvais choix, complément de réponse pour, par exemple, justifier son choix Vrai/faux Question de type choix unique avec choix entre vrai et faux uniquement. Possibilité d'exiger une justification du 26

Le constructeur de "Tests et Quiz " choix Compléter le blanc Il s'agit de textes à trous Dépôt de fichiers Ce type de question est assez semblable à l'outil Devoirs évalués : cela permet de déposer un fichier en réponse à une question posée à l'étudiant. Réponse numérique Permet d'exiger une réponse numérique qui peut être comprise dans un intervalle. Complément Questions calculées Disponible à partir de la version 10 de Sakai Permet de générer des réponses à partir d'une formule (voir l'aide en ligne) Complément : : Mise en correspondance Disponible à partir de la version 10 de Sakai Version évoluée de l'appariement. 6.2 Banque de questions L'une des fonctionnalités les plus intéressantes, sur le long terme, de l'outil Tests et Quiz, est la possibilité d'enregistrer ses questions dans une réserve de questions dans laquelle on pourra ensuite puiser, manuellement ou automatiquement, pour créer de nouvelles évaluations Réserve de questions 27

Le constructeur de "Tests et Quiz " Définition : Possibilités La réserve de questions peut être : partagée avec d'autres utilisateurs organisée en dossiers/sous-dossiers/etc 28

Le constructeur de "Tests et Quiz " Méthode : Choisir ses questions dans la réserve Dans les types de questions, il suffit de sélectionner le dernier item Copier du regroupement de questions : la réserve de question apparaît et il reste à cocher la ou les questions que l'on souhaite utiliser. Image 8 Insertion dans un questionnaire d'une question issue de la réserve Méthode : Choix aléatoire de questions Il est également possible d'insérer de manière aléatoire des questions de la réserve. Pour cela, il faut : se rendre dans les réglages de parties, sélectionner le groupe de questions dans lequel le tirage aléatoire s'effectuera indiquer le nombre de questions éventuellement la notation) cliquer sur Tirage au sort groupement de questions à partir à tirer du (et Image 9 Tirage aléatoire des questions dans la réserve 6.3 Création d'un test en ligne avec Tests et Quiz Cet exercice a pour but de présenter l'utilisation de l'outil Tests et Quiz de Sakai dans son mode principal de fonctionnement. Le questionnaire pourra être utilisé dans des évaluations formatives (sans notation) ou sommatives (avec notation automatique) Question 1 Vous avez réalisé des exercices sur papier (téléchargez le fichier (cf. Exemple à adapter pour le langage de script)) et vous souhaitez maintenant les porter sur Sakai : transposez les questions dans l'outil Tests et Quiz de Sakai. Concernant les formules mathématiques, il existe plusieurs solutions (cf. Équations mathématiques et Sakai). Réglages il s'agit maintenant de configurer (cf. Les réglages de l'outil Tests et Quiz p 9) le quiz Question 2 Réglez le quiz pour qu'il envoie ses notes au Bulletin de notes et testez-le avec un compte fictif. 29