Corriger comme un examinateur : ce que Chat GPT peut (et ne peut pas) faire pour le DALF C1. Partie 2/3

Production écrite. Synthèse : phase de test

La correction de la production écrite du DALF C1 repose sur des critères précis. Dans ce contexte, je vais me demander si Chat GPT est capable de corriger des synthèses du DALF C1 en tant qu’examinateur et de faire un retour. Dans cet article je présenterai le test que j’ai effectué et je ferai une analyse des résultats obtenus.

Première étape : envoi de demande

Dans un premier temps, j’ai soumis à Chat GPT la demande suivante : « Je vais t’envoyer la grille officielle d’évaluation de la synthèse du DALF C1, les descripteurs de compétences, ainsi que trois productions écrites rédigées par mes étudiantes et le sujet. Ta tâche sera d’évaluer chacune de ces productions comme le ferait un examinateur-correcteur du DALF C1. Pour chaque copie, je souhaite : 

• une première évaluation selon une lecture très stricte des critères ; 

• une seconde évaluation selon une lecture plus souple (moins stricte) des mêmes critères ; 

• une note moyenne finale, correspondant à la note que l’étudiante pourrait raisonnablement obtenir à l’examen. 

Chaque retrait de points devra être explicitement justifié, en précisant les critères concernés et les raisons de la pénalisation. »

J’ai également ajouté des fichiers cités dans ma demande : la grille officielle d’évaluation de la synthèse du DALF C1, les descripteurs de compétences, trois productions écrites rédigées par mes étudiantes et le sujet (2 textes sur les livres numériques du manuel ABC DALF C1/C2). 

Deuxième étape : évaluation stricte

La première évaluation de chacune des trois copies a été assez stricte. Chat GPT a évalué critère par critère chaque synthèse proposée en indiquant pourquoi il enlève les points. 

Voici quelques exemples (l’évaluation stricte de la copie 1) :

Il m’a également fourni un tableau récapitulatif. 

Voici l’exemple pour la copie 1 :

Troisième étape : évaluation plus souple

Dans un second temps, Chat GPT a évalué les copies de manière plus souple. Cette fois-ci, il ne m’a pas fourni de détails en me proposant uniquement un tableau récapitulatif. 

Voici l’exemple pour la copie 1 :

Quatrième étape : note finale et bilan

Ensuite, il a donné une note moyenne. 

Note finale copie 1 : 

Note finale copie 2 :

Note finale copie 3 :

Il a également fait le bilan. 

Bilan copie 1 :

Bilan copie 2 :

Bilan copie 3 :

Cinquième étape : conseils 

Enfin, j’ai demandé à Chat GPT de formuler des conseils pratiques : « Maintenant il faut que tu donnes des conseils à chaque étudiante. Comment elles pourraient améliorer leurs synthèses ? »

Voici l’exemple de ses conseils à l’étudiante ayant rédigé la copie 3 :

Etape finale : analyse 

Les réponses de Chat GPT sont bien détaillées et précises. La machine arrive à évaluer les synthèses en se basant sur la grille d’évaluation envoyée et sur les descripteurs. L’évaluation stricte suivie de l’évaluation souple permettent de voir quelle est la note minimale et la note maximale sur laquelle la candidate pourrait compter le jour de l’examen. Par conséquent, la note moyenne lui donne une idée générale de ses compétences en synthèse.

Enfin, les conseils d’amélioration sont également assez concrets et utiles. Chat GPT propose un exercice guidé qui ferait travailler les erreurs et aiderait à progresser en écriture de synthèse. 

En conclusion, nous pouvons constater que Chat GPT, ayant une demande clairement formulée et des ressources nécessaires, peut évaluer la synthèse du DALF C1 comme s’il était examinateur-correcteur. Il est également capable de faire un retour et de donner des conseils. Ayant précédemment corrigé ces copies moi-même, je confirme que la note moyenne attribuée à chaque copie correspond généralement à celle que j’avais mise à chacune de ces étudiantes.