Des professeurs disent reconnaître les devoirs faits par ChatGPT très facilement : voilà comment

Robin Lamorlette

07 mars 2023 à 11h40

ChatGPT a beaucoup de qualités (et de défauts), mais mâcher le travail des étudiants pour des devoirs n'en fait pas (encore) partie.

En l'état actuel des choses, des professeurs ayant analysé plusieurs essais produits par le chatbot extrêmement populaire d'OpenAI sont arrivés à la même conclusion : ChatGPT est vraiment nul pour ce genre de tâche.

Un AntIsèche qui bave

Alors que, par mesure de précaution, ChatGPT a été banni de plusieurs écoles, rien n'interdit techniquement aux élèves de faire leurs devoirs à la maison en s'aidant largement du chatbot. Sauf que, à l'instar de l'IA qui évolue (de manière fulgurante), les professeurs commencent à s'accoutumer à ces productions.

Malheureusement pour les étudiants les moins studieux, ChatGPT est un piètre compagnon pour faire leurs devoirs universitaires à leur place. « J'ai compris que j'avais affaire à une IA, car malgré la cohérence syntaxique de l'essai, il n'avait aucun sens », a ainsi indiqué Darren Hicks, professeur assistant de philosophie à l'université de Furman.

De nombreux autres professeurs ont exprimé une opinion similaire sur les essais produits par ChatGPT. Ils ont en particulier souligné à quel point le chatbot se plante sur toute la ligne, ce qui donne lieu à un travail dont le fond manque affreusement de cohérence. « En l'état actuel des choses, je ne pense pas que l'outil soit assez bon pour rédiger des essais universitaires », assène Kristin Merrilees, étudiante à l'université de Barnard.

De tels devoirs demandent en effet plus qu'une simple restitution de connaissances largement disponibles sur Internet, et le chatbot n'est pas encore capable de réfléchir par lui-même avec un argumentaire solide. Mais au vu de sa croissance exponentielle, rien ne garantit que cela ne sera pas amené à changer dans un futur plus ou moins proche.

Les étudiants peuvent se tromper aussi, mais autrement

Bien entendu, un étudiant de chair et d'os est sans conteste capable de produire des essais insensés. Mais il est, selon les professeurs, facile de distinguer un mauvais devoir fait par un étudiant d'un devoir similaire généré par ChatGPT. Lorsqu'un étudiant débite des âneries, c'est fait de manière maladroite. Le chatbot, lui, se montre extrêmement confiant dans les énormités qu'il couche sur le proverbial papier.

Le style de rédaction est également un facteur distinctif important. ChatGPT a tendance à remplir ses œuvres de platitudes évidentes et de non-lieux, qu'il va allègrement mélanger pour étoffer son argumentaire. L'étudiant a quant à lui été formé par la force de l'habitude à éviter ce genre d'écueils.

Enfin, ChatGPT souffre globalement d'un problème récurrent : son terrible manque de fiabilité en exposant des faits et en sourçant ses informations. S'il ne trouve rien pour corroborer ses dires, il n'aura aucun scrupule à inventer de toutes pièces des sources, sans faire preuve de subtilité, comme un étudiant pourrait le faire pour essayer de cacher le fait qu'il plagie d'autres essais.

Certains professeurs plus pessimistes font par ailleurs état de leurs doutes quant à l'intérêt d'avoir pour ainsi dire lâché ChatGPT dans la nature. Bret Devereaux, professeur d'Histoire de l'université de Caroline du Nord, s'est notamment exprimé ainsi : « Je suis un historien militaire, et j'en connais donc un rayon sur les technologies qui existent, mais que l'on ne devrait pas utiliser. Nous pourrions par exemple mener une expérience en conditions réelles pour savoir si faire exploser 2 000 têtes nucléaires peut provoquer un hiver nucléaire. Nous ne devrions pas le faire. »

Télécharger

ChatGPT

Chat dans différentes langues, dont le français
Générer, traduire et obtenir un résumé de texte
Générer, optimiser et corriger du code

Créé par OpenAI, ChatGPT est un chatbot avancé propulsé par le modèle linguistique de dernière génération GPT-4. En exploitant des technologies d'apprentissage en profondeur et d'intelligence artificielle, ce chatbot a la capacité de déchiffrer et de comprendre les demandes des utilisateurs. Grâce à son habileté à générer du texte de manière ingénieuse, ChatGPT offre des réponses adaptées et pertinentes, garantissant une interaction de chat fluide et une expérience utilisateur optimisée.

Source : Vice

Robin Lamorlette

Fan absolu de tech, de films/séries, d'heroic-fantasy/SF et de jeux vidéos type RPG, FPS et hack&slash qui se shoote à coups de lore sur Star Wars, The Witcher, Cyberpunk, Game of Thrones et Donjons &...

Lire d'autres articles

Commentaires (30)

ivico

Autre point. Il ne fait pas ou très peu de fautes d’orthographe. Son vocabulaire est faible. Avant que Chatgpt écrive un truc comme « Dès potron-minet, je m’en irai avec mon w dans la forêt » il va falloir attendre longtemps. Mettre des mots désuets dans une copie, comme le faisait le général de Gaulle dans ses discours, a 2 vertus. on est sur que c’est écrit par un humain cela oblige à ouvrir un dictionnaire. Donc, si j’étais prof, je dirais « ok les gars pour chatgpt » mais faut pas s’attendre à avoir des bonnes notes avec. Ou plus prosaïquement, comme me disais un prof un jour : « vous avez le droit de copier. Je dirais même, faites le! Mais intelligemment en copiant sur les bons. Si vous copiez une erreur et que je m’en aperçois alors je vous pénaliserai ». Du coup, j’ai peu copié dans ma vie.

Maraut

Je me souviens , il y a longtemps, j’ai du faire un résumé du père Goriot que je n’avais à peine lu. j’ai récupéré celui d’un copain ( là ils sont tous mes copains) et je l’ai réécris avec mes mots, mes expressions. j’ai du avoir une note dans la moyenne. moralité, il faut utiliser ChatGPT, mais intelligemment ! et ne pas recopier bêtement. La paresse, cela demande un minimum de travail !

Werehog

J’ai connu des personnes qui affirmaient avec beaucoup d’assurance des choses complètement fausses. Si on regarde bien, le monde politique en est rempli ! Ça ne distingue clairement pas une IA je trouve.

ayaredone

On peut s’en servir de base, pour avoir des idées, mais recopier bêtement ce n’est pas la solution. Au minimum on paraphrase.

Jacob1337

Encore une fois, utilier chat gpt est une chose, apprendre à lui parler/à l’enrichir de son propre style, et le personnaliser, c’en est une autre.

Space_Boy

Il est excellent pour résumer du texte. C’est un modle de langage, donc utilise le dans ce domaine. Pas pour vous donner la recette d’une quiche lorraine…

philouze

"Autre point. Il ne fait pas ou très peu de fautes d’orthographe. Son vocabulaire est faible. Avant que Chatgpt écrive un truc comme « Dès potron-minet, je m’en irai avec mon w dans la forêt » il va falloir attendre longtemps. Mettre des mots désuets dans une copie, comme le faisait le général de Gaulle dans ses discours, a 2 vertus. on est sur que c’est écrit par un humain cela oblige à ouvrir un dictionnaire. " Ce n’est absolument pas une limitation de l’algo, mais de celle du sourcing stylistique de textes initiaux, et ce serait extrêmement facile à patcher (et ça le sera, si jamais ça a un intérêt). On peut même imaginer une surcouche de « changement de style » après la génération initiale du contenu, capable de traduire ça en style officiel, wesh-wesh, désuet ou ce que tu veux, avec tous les dosages imaginables. Le vocabulaire exact n’est probablement que la dernière couche de la génération. Les premiers générateurs d’image aussi avaient très peu de styles sur étagère, mais en seulement un an et demie, on est passé du tout premier tableau « à la manière de » - renoir de mémoire, franchement pas très convaincant, à DALL-E et MIDJourney qui à eux deux doivent pouvoir générer une bonne centaines de styles distincts (et toutes les combinaisons intermédiaires)

Kriz4liD

Avec mon fils , on a voulu écrire le résumé de l histoire « la girafe ,le pélican et moi » après l avoir lu, on a voulu s aider de chatgpt. Le problème c’est que chatgpt ne connaît pas l histoire,mais pas du tout ! Il nous a sorti un résumé sorti de son imagination, tellement loin de l histoire originale! J imagine que c’est le cas pour plein d histoire, si chatgpt ne connaît pas l histoire , il te sort quand même qu’il l a connaît et t écris un résumé aléatoire Heureusement qu’on avait lu l histoire Sinon oui , je montre à mon fils comment utiliser ce genre d outil , ce sera utilisé massivement dans pas longtemps et je souhaite qu’il maîtrise bien le sujet.

Kriz4liD

Non, il ne faut surtout pas croire ce que renvoie chatGpt , pour te donner des exemples , si tu lui demande des infos sur la Mauritanie, 60% des infos qu’il te donnera seront fausse , si tu lui demande le résumé d’une histoire (par exemple la girafe le pélican et moi) il sera complètement faut , mais l IA t affirmera quand même qu’il connaît l histoire ! Par contre la poule d’eau , il l a connaît très bien ,il m à sorti des données très correcte ! Oui j aide mon fils dans ses devoir et ses recherches en utilisant chatgpt

toast

Je viens de demander à ChatGPT de rédiger un court texte avec quelques mots désuets : Il était une fois un gentilhomme fortuné qui arborait une élégante cravate en dentelle et un chapeau haut-de-forme. Il parcourait les rues pavées de la ville en calèche, saluant d’un geste de la main les passants qu’il croisait sur son chemin. Arrivé à sa demeure, il s’installa confortablement dans son fauteuil club en cuir et prit une plume d’oie pour rédiger une missive à un ami cher. Il y fit mention de sa récente acquisition, une machine à écrire de marque Remington, dont il était particulièrement fier. Après avoir scellé l’enveloppe avec un cachet de cire rouge, il sonna le valet de chambre pour qu’il la fasse parvenir à son destinataire. Le soir venu, il se rendit à l’opéra, paré de sa plus belle tenue, pour y assister à une représentation de La Traviata. Tel était le quotidien de cet homme à la fois raffiné et désuet, qui vivait avec élégance à une époque révolue. Niveau vocabulaire c’est pas mal et ça m’a pris moins de 10 secondes. En peaufinant la question, on peut encore améliorer le truc. 10 secondes…

dimebag

Histoire n°1 par ChatGPT…histoire n°2 par ChatGPT…histoire n°982348324712348092348234 par ChatGPT Est ce que la capacité d’écriture de ChatGPT en fait un auteur dont on se souviendra et dont on retiendra des œuvres majeures ?

Ezeta

Ceux qui font ce genre d’affirmation n’ont clairement pas testé l’outil (ou alors juste une fois, avec une question)

toast

Cette IA soulève tellement de questions dont le droit d’auteur. Le sujet est tellement intéressant bien que me dépassant sur beaucoup de points.

Martin_Penwald

Nous pourrions par exemple mener une expérience en conditions réelles pour savoir si faire exploser 2 000 têtes nucléaires peut provoquer un hiver nucléaire. Nous ne devrions pas le faire. Quel rabat-joie ! Comment voulez-vous faire avancer la science avec des rétrogrades comme ça ?

John_Doo

Demandez à ChatGPT de faire un résumé d’un ouvrage en précisant d’inclure des fautes de grammaires et d’orthographes… histoire de rigoler un moment

RobinPrieur

Les étudiants n’ont que a précisé un style d’écriture (ou à envoyer un ancien devoir qu’ils ont rédigés) pour que chatgpt réalise le texte dans ce style là. Avec le même vocabulaire, etc…

jcc137

« Tel était le quotidien de cet homme » !?!!?? Sacré quotidien le bonhomme !! Le passage qui me plaît bien aussi, c’est celui où il écrit de sa plume d’oie qu’il vient d’acquérir une machine à écrire !!! Là je pleure de rire !!! Y a pas à dire, on n’est pas du même monde !

ayaredone

En tout cas c’est une excellente initiative de montrer à ses enfants comment se servir de ces outils et surtout de garder un esprit critique. C’est un outil à ne pas utiliser comme seule source. Comme Google.

ayaredone

Il aurait pu utiliser sa machine à écrire

toast

Je viens de lui demander avec Le Petit Prince. On sent qu’à un moment, il n’arrive plus à faire de fautes bien que la forme ne soit pas dingue : B1envenu à mon résumé de « Le petit prince » par Antonie de Saint Exupéry. C’est l’histori d’un pilote d’avion qui s’écrasé dans le désert du Sahara. Il rencontre un petit prince qui vient de l’étoile B612, qui lui raconte ses voyages dans l’univers. Le petit prince a aussi rencontré des personnages étranges sur les planètes qu’il a visitées, comme un roi qui n’a pas de sujets et un businessman qui compte sans fin. Le petit prince raconte également son amitié avec une rose vaniteuse sur sa planète d’origine. En fin de compte, le petit prince doit retourner sur sa planète, mais il promet de revenir visiter le narrateur. C’est une histoire touchante qui enseigne des leçons importantes sur l’amitié et la responsabilité.

Francis7

Quand j’étais étudiant, dans les années 1990, mes mémoires de recherche étaient en gros des traductions et des reprises méthodologiques point par point et bêtement d’articles anglo-saxon. Et ça, c’était bien vu ! Pour les petits devoirs et les examens, il suffisait d’avoir lu les bouquins des profs, c’était eux qui les faisaient : c’était des gens connus. QCM : 17/20 et la pharmaco écrite avec les petits schémas au crayon noir qui vont bien : 18/20. 16/20 de moyenne générale pour les diplômes. Et puis ça ne coûtait vraiment rien de bosser un peu (en écoutant Terje Rypdal). ChatGPT n’aurait pas pu m’aider pour les statistiques multivariées. J’ai pris des options supplémentaires pour apprendre. C’est sûr que les profs savent reconnaitre le travail qui a été fait.

Blackalf

La question que je me pose, personnellement, c’est comment savoir si les informations données par ChatGPT sont justes ou pas ? Voilà un bon exemple : Kriz4liD: Non, il ne faut surtout pas croire ce que renvoie chatGpt , pour te donner des exemples , si tu lui demande des infos sur la Mauritanie, 60% des infos qu’il te donnera seront fausse , si tu lui demande le résumé d’une histoire (par exemple la girafe le pélican et moi) il sera complètement faut , mais l IA t affirmera quand même qu’il connaît l histoire ! Par contre la poule d’eau , il l a connaît très bien ,il m à sorti des données très correcte ! Oui j aide mon fils dans ses devoir et ses recherches en utilisant chatgpt Tu as vu que les réponses au sujet de l’histoire étaient fausses, parce que tu connaissais l’histoire. Tu également vu que les réponses sur la poule d’eau étaient justes, certainement parce que tu avais déjà des connaissances te permettant de juger la justesse des réponses données. Mais lorsqu’il s’agit d’un sujet que l’on ne connaît pas, comment savoir si les réponses sont valables…à moins de faire des recherches pour vérifier par soi-même, et là je me demande donc où est le gain de temps.

Kriz4liD

Oui c’est exacte , j ai fait la recherche et fini de lire l histoire avant d aller chercher sur chatgpt avec mon fils, faut quand même pas que je lui apprenne à se reposer sur ses lauriers ! Et en même temps , il a bien compris que les données renvoyées par ChatGpT étaient dans la majorité des cas fausses. Un double Check est obligatoire.

ovancantfort

Ne t’inquiète pas! Au fil du temps, suffisamment de décérébrés posteront des articles générés par Chatgpt sur internet sans rien vérifier et les « faits alternatifs » inventés par Chatgpt deviendront peu à peu des vérités. Et le mieux, c’est que Bing aura ainsi des sources à te renvoyer. L’IA deviendra ainsi de plus en plus correcte. Quel beau cercle vertueux

Korgen

Evidemment on parle d’un prof de philo, la matière la plus subjective qui soit (et la plus inutile). Dans le domaine universitaire c’est clair que ChatGPT ne saura pas faire une thèse qui tient la route. Par contre le chatbot reste efficace pour le collège et le lycée.

LeChien

C’est juste du JCVD’otron version 2021.

Jacob1337

Ce qu’il faut comprendre, c’est que si tu lui avais envoyé un gros copier coller de l’histoire avant, il t’en aurait fait un résumé ensuite, car GPT est capable de croiser les sources dont tu l’as abreuvé avec ce dont il dispose dans son modèle. Ensuite roulez jeunesse !

ovancantfort

J’ai pensé la même chose! Le meilleur, c’est que le Jeanclaudotron existe toujours http://gazcouilles.free.fr/pages/jeanclaudotron.html

LeChien

Voilà le code du noyau de chatgpt. Le seul le vrai l’unique.

Fck

@werehog à totalement raison. Quand vous connaissez un domaine, vous vous rendez compte à quel point certains disent des énormités en se basant sur leur petit doigt et de manière peromptoire… chatgpt fera pas pire

Voir tous les messages sur le forum

Des professeurs disent reconnaître les devoirs faits par ChatGPT très facilement : voilà comment

Un AntIsèche qui bave

Les étudiants peuvent se tromper aussi, mais autrement

A découvrir en vidéo

Commentaires (30)

Top app & logiciels

Sur le même sujet