Questions pour évaluation avec IA

Les étudiant·e·s sont-ils autorisé·e·s à utiliser des outils d'IA génératives pour les travaux académiques ?

OUI

NON

Pensez-vous que l'utilisation de l'IA aura des implications pédagogiques significatives et pourra améliorer les résultats de l'apprentissage de vos étudiant·e·s ?

Envisagez d'explorer ces options lors de la conception des activités évaluées

NON

Info

OUI

NON

L'utilisation d'outils d'IA va-t-elle modifier de manière significative l'expérience des étudiant·e·s ?

L'utilisation des outils d'IA par les étudiants doit-elle être soumise à des restrictions ?

OUI

OUI

Veiller à ce que ces changements soient gérés de manière appropriée

Quelle utilisation est permise pour ces outils IA ?

Quels outils IA utiliser ?

Info

Info

Info

NON

NON

L'utilisation d'outils d'IA va-t-elle modifier de manière significative l'expérience des étudiant·e·s ?

Considérer les propositions suivantes

Info

OUI

Veiller à ce que ces changements soient gérés de manière appropriée

Info

Considérer les propositions suivantes

Info

Cette infographie est une traduction avec quelques modifications de l'article de Sean McGinn (Incorporating AI in Learning Assessments: A Guided Pathway) publié sur linkedin le 30/06/2023. L'article et l'infographie sont disponibles en cliquant sur l'icône à gauche.

Réfléchir à la manière dont les outils peuvent être utilisés. Exemples :

• L'IA dans les étapes de planification de la tâche d'évaluation
• L'IA en tant que partie intégrante de la tâche
• L'IA pour l'auto-test
• L'IA comme outil de révision

Vous devez également prendre en compte les éléments suivants :

• Quelle est l'étendue de l'utilisation des outils d'IA qui devrait être autorisée dans l'évaluation ? Cette question peut donner lieu à deux résultats :

Utilisation limitée : Si l'outil d'IA ne doit être utilisé que pour certaines tâches, spécifiez clairement ces tâches afin d'éviter toute confusion. Utilisation extensive : Si l'outil d'IA peut être utilisé de manière extensive, il convient de fournir des lignes directrices claires sur ce que cela implique.

• L'utilisation des outils d'IA par les étudiants doit-elle être contrôlée ? Réfléchissez aux moyens de mettre en œuvre cette mesure, par exemple au moyen d'un logiciel qui suit l'utilisation de l'outil ou en demandant aux étudiants de documenter leur processus.
• Faut-il prévoir une procédure d'approbation pour les outils d'IA que les étudiants souhaitent utiliser ? Dans l'affirmative, prévoyez une procédure claire permettant aux étudiants de proposer et de justifier leur choix d'outils et de les faire approuver par l'enseignant ou un comité.
• Les étudiants doivent-ils démontrer qu'ils sont capables d'utiliser l'outil d'IA ? Dans l'affirmative, proposez des méthodes permettant aux étudiants de montrer qu'ils sont capables d'utiliser l'outil efficacement, par exemple une tâche de pré-évaluation.
• Existe-t-il des considérations relatives à la confidentialité et à la sécurité des données ? Dans l'affirmative, fournissez des lignes directrices sur la manière de garantir la confidentialité et la sécurité des données lors de l'utilisation des outils d'IA.

Voici quelques propositions de mesures à prendre dans le cadre de votre cours:

Fournir une formation adéquate : Veiller à ce que les enseignant·e·s et les étudiant·e·s soient correctement formé·es à l'utilisation efficace des outils d'IA. Il peut s'agir d'ateliers pratiques, de tutoriels en ligne ou même d'une session de démarrage au début du cours.

Offrir un soutien supplémentaire : Reconnaître que certains étudiant·e·s peuvent avoir plus de difficultés que d'autres avec la nouvelle technologie. Proposez-leur un soutien supplémentaire, tel que du tutorat par un·e pair·e, des séances d'aide sans rendez-vous ou des ressources en ligne.

Modifier la structure de votre cours : Envisager de modifier la structure de votre cours pour l'adapter à l'utilisation des outils d'IA. Il peut s'agir de modifier le calendrier de certaines activités, de réaffecter le pondération de la notation ou d'adapter le rythme du cours.

Solliciter un retour d'information régulier : Étant donné qu'il s'agit d'un changement important, il est important de vérifier régulièrement auprès des étudiant·e·s comment ils s'adaptent. Sollicitez un retour d'information par le biais d'enquêtes, d'un one-minute paper avec Wooclap à la fin d'un cours ou encore lors de conversations informelless. Utilisez ce retour d'information pour apporter des ajustements continus au cours.

Établir des canaux de communication clairs : Les nouvelles technologies posent souvent des problèmes ou des questions inattendus. Mettez en place des canaux de communication clairs pour que les étudiants puissent poser des questions, signaler des problèmes ou discuter de leurs expériences avec les outils d'IA. Vous pouvez pour cela, par exemple, ouvrir un forum spécifique sur l'espace Moodle de votre cours.

Promouvoir l'apprentissage par les pairs : Encourager les étudiant·e·s à apprendre les un·e·s des autres. Il peut s'agir de mettre en place des groupes d'étude, des forums en ligne ou des séances de tutorat par les pair·e·s, où les étudiant·e·s peuvent partager leurs expériences et leurs conseils sur l'utilisation des outils d'IA.

Mettez en avant les avantages et les applications concrètes : Pour motiver les étudiant·e·s et les aider à comprendre l'intérêt d'apprendre à utiliser les outils d'IA, mettez en avant les avantages et les applications concrètes de ces outils. Montrez des exemples d'utilisation dans vos contextes scientifiques ou dans la recherche, et discutez des compétences que les étudiant·e·s acquièrent en apprenant à les utiliser.

Évaluer l'adaptation de vos étudiant·e·s : Parallèlement aux évaluations académiques régulières, prévoyez une évaluation de l'adaptation des étudiant·e·s à l'utilisation des outils d'IA. Il peut s'agir d'un élément d'autoréflexion ou d'une tâche pratique qui évalue spécifiquement l'utilisation de l'outil.

• Veiller à ce que les étudiant·e·s aient un accès équitable aux outils
• Communiquer les résultats d'apprentissage qui seront mesurés par l'activité d'évaluation.
• Indiquer si et comment l'utilisation des outils d'IA sera prise en compte dans l'évaluation des performances de l'étudiant·e dans le cadre de l'activité d'évaluation.
• Fournir ET communiquer des lignes directrices sur les implications éthiques et les éventuels préjugés des outils d'IA .
• Fournir ET communiquer les politiques d'intégrité académique en place dans l'institution
• Fournir des exemples aux étudiants

• Veiller à ce que les étudiant·e·s aient un accès équitable aux outils
• Communiquer les résultats d'apprentissage qui seront mesurés par l'activité d'évaluation.
• Indiquer si et comment l'utilisation des outils d'IA sera prise en compte dans l'évaluation des performances de l'étudiant·e dans le cadre de l'activité d'évaluation.
• Fournir ET communiquer des lignes directrices sur les implications éthiques et les éventuels préjugés des outils d'IA .
• Fournir ET communiquer les politiques d'intégrité académique en place dans l'institution
• Fournir des exemples aux étudiants

Réfléchissez aux outils qui peuvent être utilisés.

Exemples :

• outils d'IA génératrice de texte
• outils d'IA génératrice d'images
• outils d'IA génératrice de code

Vous devez également prendre en compte les éléments suivants :

• Quelle est l'étendue de l'utilisation des outils d'IA qui devrait être autorisée dans l'évaluation ? Cette question peut donner lieu à deux résultats :

Utilisation limitée : Si l'outil d'IA ne doit être utilisé que pour certaines tâches, spécifiez clairement ces tâches afin d'éviter toute confusion. Utilisation extensive : Si l'outil d'IA peut être utilisé de manière extensive, il convient de fournir des lignes directrices claires sur ce que cela implique.

• L'utilisation des outils d'IA par les étudiants doit-elle être contrôlée ? Réfléchissez aux moyens de mettre en œuvre cette mesure, par exemple au moyen d'un logiciel qui suit l'utilisation de l'outil ou en demandant aux étudiants de documenter leur processus.
• Faut-il prévoir une procédure d'approbation pour les outils d'IA que les étudiants souhaitent utiliser ? Dans l'affirmative, prévoyez une procédure claire permettant aux étudiants de proposer et de justifier leur choix d'outils et de les faire approuver par l'enseignant ou un comité.
• Les étudiants doivent-ils démontrer qu'ils sont capables d'utiliser l'outil d'IA ? Dans l'affirmative, proposez des méthodes permettant aux étudiants de montrer qu'ils sont capables d'utiliser l'outil efficacement, par exemple une tâche de pré-évaluation.
• Existe-t-il des considérations relatives à la confidentialité et à la sécurité des données ? Dans l'affirmative, fournissez des lignes directrices sur la manière de garantir la confidentialité et la sécurité des données lors de l'utilisation des outils d'IA.

Si votre 'objectif est de mesurer les résultats de l'apprentissage de vos étudiant·e·s dans une discipline sans utiliser d'outils d'IA générative, nous vous proposons d'envisager les alternatives suivantes :

1. Réaliser l'évaluation à livre fermé en présentiel dans une salle sous surveillance au format papier.
2. Réaliser l'évaluation à livre fermé en présentiel dans une salle sous surveillance en permettant aux étudiant·e·s d'utiliser leur ordinateur mais dans une configuration sécurisée avec le wifi exam-unil (qui peut bloquer les accès aux outils IA).
3. Proposer une évaluation contextualisée basées sur des projets ou des problèmes, spécifiques.
4. Demander des travaux qui mettent en avant la réflexion personnelle et y ajouter une défense orale.
5. Proposer des évaluations authentiques (tâches réelles)
6. Proposer une évaluation orale
7. Incorporer certaines parties des évaluations dans le cadre d'un contrôle continu réalisé lors des cours (dans les règles permises au sein de l'UNIL)

Voici quelques propositions de mesures à prendre dans le cadre de votre cours:

Fournir une formation adéquate : Veiller à ce que les enseignant·e·s et les étudiant·e·s soient correctement formé·es à l'utilisation efficace des outils d'IA. Il peut s'agir d'ateliers pratiques, de tutoriels en ligne ou même d'une session de démarrage au début du cours.

Offrir un soutien supplémentaire : Reconnaître que certains étudiant·e·s peuvent avoir plus de difficultés que d'autres avec la nouvelle technologie. Proposez-leur un soutien supplémentaire, tel que du tutorat par un·e pair·e, des séances d'aide sans rendez-vous ou des ressources en ligne.

Modifier la structure de votre cours : Envisager de modifier la structure de votre cours pour l'adapter à l'utilisation des outils d'IA. Il peut s'agir de modifier le calendrier de certaines activités, de réaffecter le pondération de la notation ou d'adapter le rythme du cours.

Solliciter un retour d'information régulier : Étant donné qu'il s'agit d'un changement important, il est important de vérifier régulièrement auprès des étudiant·e·s comment ils s'adaptent. Sollicitez un retour d'information par le biais d'enquêtes, d'un one-minute paper avec Wooclap à la fin d'un cours ou encore lors de conversations informelless. Utilisez ce retour d'information pour apporter des ajustements continus au cours.

Établir des canaux de communication clairs : Les nouvelles technologies posent souvent des problèmes ou des questions inattendus. Mettez en place des canaux de communication clairs pour que les étudiants puissent poser des questions, signaler des problèmes ou discuter de leurs expériences avec les outils d'IA. Vous pouvez pour cela, par exemple, ouvrir un forum spécifique sur l'espace Moodle de votre cours.

Promouvoir l'apprentissage par les pairs : Encourager les étudiant·e·s à apprendre les un·e·s des autres. Il peut s'agir de mettre en place des groupes d'étude, des forums en ligne ou des séances de tutorat par les pair·e·s, où les étudiant·e·s peuvent partager leurs expériences et leurs conseils sur l'utilisation des outils d'IA.

Mettez en avant les avantages et les applications concrètes : Pour motiver les étudiant·e·s et les aider à comprendre l'intérêt d'apprendre à utiliser les outils d'IA, mettez en avant les avantages et les applications concrètes de ces outils. Montrez des exemples d'utilisation dans vos contextes scientifiques ou dans la recherche, et discutez des compétences que les étudiant·e·s acquièrent en apprenant à les utiliser.

Évaluer l'adaptation de vos étudiant·e·s : Parallèlement aux évaluations académiques régulières, prévoyez une évaluation de l'adaptation des étudiant·e·s à l'utilisation des outils d'IA. Il peut s'agir d'un élément d'autoréflexion ou d'une tâche pratique qui évalue spécifiquement l'utilisation de l'outil.