Tester ChatGPT

 


Ça me donne une idée : comparer linguistiquement la performance de nos étudiants, des productions ChatGPT, de textes publics (Wikipédia)  et de correcteurs. 

Pour le protocole  :
  1. Générons une douzaine de sujets (Conceptuel/Factuel; simple/complexe)  correspondants un champ de connaissance.
  2. Proposons ces sujets à ChatGPT, à une douzaine d'étudiants.
  3. Proposons les réponses à 3 correcteurs par copie.
Quels effets sur les mesures suivantes : mesures : lisibilité, div lexicale, sentiment, similarité et notes données par des enseignants (à l'aveugle). 

Un petit contrôle peut être ajouté : informer, ou non, les étudiants de l'expérience. 

On s'attend dans une première intuition :
1) une meilleure qualité syntaxique
2) une plus faible qualité lexicale
3) une grande similarité quand des notes faibles sont données par les correcteurs
4) une grande capacité de détection des copies artificielles.

Commentaires

Enregistrer un commentaire

Posts les plus consultés de ce blog

Blog again

 Il y a longtemps que je n'ai pas écrit.  J'ai appris à calculer., y compris la langue.  Je sens qu'il va falloir écrire à nouveau, la langue du calcul n'est pas suffisante. Elle ne dit pas le soi, même si elle dit ce que l'on veut. Elle manque de frisson, d'intimité, elle échappe au sensible. Son style est dans ses faiblesses, ses inélégances.  Je ne renoncerai pas à la langue du calcul, j'en commenterai ici ses développements, ses à-côtés, le journal de mes sensibilités et du dénombrement. Un journal, rien de plus
Lire la suite
 Définition : marché de l'occasion Mécanisme de marché par lequel les pauvres subventionnent la consommation des plus riches en jouissant de l'impunité morale, il est réputé être durable. Il faut développer. D'abord en analysant comment ceux qui ont un appétit de produit de luxe mette en œuvre des stratégies d'achat fondée sur la revente de pièces plus anciennes. Les plateformes leur offre un espace d'attention plus vaste que les "second hand shop" de luxe. Discret et traditionnel  Le collaboratif de ce premier point de vue encourage une plus grande consommation de la part des principaux consommateurs. Il génère aussi de nombreuses occasions pour un public moins impliqué, qui accepte volontiers quelques défauts pour un prix moins bien élevé, celui de l'occasion.  Ainsi les plus riches financent leur consommation sur le désir contraint des plus pauvres. 
Lire la suite