Humour de ChatGPT défie les écrivains pro

Qui est plus drôle, l’IA ou les humains ? Une étude récente montre que nous trouvons souvent les blagues de ChatGPT aussi drôles, voire plus drôles, que celles écrites par des humains, y compris des écrivains professionnels. Cela implique que l’IA pourrait avoir un impact significatif sur l’industrie du divertissement.

Créer de la comédie est un défi car l’humour est subjectif ; ce qui fait rire une personne peut ne pas amuser une autre. Les écrivains de comédie doivent habilement équilibrer le timing, la livraison, l’originalité et éviter les clichés.

Alors, comment se comporte ChatGPT 3.5 d’OpenAI en tant qu’écrivain comique ? Peut-il être vraiment drôle ? Des chercheurs de l’Université de Californie du Sud (USC) ont récemment exploré cette question et partagé leurs résultats.

ChatGPT excelle dans la création de blagues sans émotions

« Bien que ChatGPT ne ressente pas d’émotions, il crée souvent des blagues inédites mieux que la personne moyenne. Cela suggère qu’il n’est pas nécessaire de ressentir les émotions liées à l’appréciation d’une blague pour en raconter une bonne », a déclaré Drew Gorenz, doctorant en psychologie sociale à l’USC Dornlife College, comédien amateur et auteur principal et correspondant de l’étude.

Des recherches précédentes ont exploré la capacité de ChatGPT à générer de l’humour, mais sans une évaluation et une comparaison approfondies avec des comédies écrites par des humains. Gorenz, avec Norbert Schwarz, professeur de psychologie et de marketing, ont cherché à répondre à cette question en menant deux études exhaustives.

Dans la première étude, un groupe d’adultes américains a effectué trois tâches différentes de rédaction de comédie. Dans la tâche des acronymes, les participants ont créé des phrases humoristiques pour des acronymes comme « S.T.D. », « C.L.A.P. » et « C.O.W. ».

Dans la tâche de remplissage de blancs, ils ont complété des phrases telles que : « Un exploit remarquable que vous ne mettriez probablement pas sur votre CV : ________. »

Les participants ont été testés sur la création de blagues de type “roast”.

Enfin, la tâche de blague de type “roast” exigeait des participants qu’ils créent une réponse drôle à un scénario hypothétique. Par exemple, « Imaginez qu’un ami vous demande votre avis sur son chant. Après une démonstration douloureuse, il vous demande, “Alors, comment c’était ?” Vous décidez d’être honnête et répondez, “Écouter ça, c’était comme ________.” »

ChatGPT 3.5 a ensuite reçu les mêmes tâches.

Un autre groupe d’adultes a évalué l’humour des réponses en utilisant une échelle de sept points, où zéro signifiait « pas du tout drôle » et six « très drôle ». Les réponses de ChatGPT ont été jugées plus drôles que celles des humains, avec 69,5 % des participants préférant les blagues générées par l’IA (26,5 % préféraient celles écrites par des humains et 4,0 % trouvaient les deux également amusantes).

“En général, ChatGPT 3.5 a surpassé de 63 % à 87 % des participants humains, variant selon le type de tâche humoristique”, ont noté les chercheurs. “ChatGPT 3.5 s’est particulièrement distingué dans la tâche de blague ‘roast’, ce qui est surprenant étant donné sa nature agressive. Étant donné que ChatGPT est programmé pour éviter les discours offensants ou haineux, on aurait pu s’attendre à un résultat opposé.”

Évaluer la génération de titres satiriques de nouvelles par ChatGPT

Dans la deuxième étude, les chercheurs ont évalué la capacité de ChatGPT à créer des titres de nouvelles satiriques similaires à ceux du site The Onion. En raison du manque de mises à jour régulières sur les nouvelles du monde par l’IA, ils ont utilisé les 50 derniers titres de la section de nouvelles locales de The Onion avant le 1er octobre 2023, tels que “Un homme demande sa main en mariage juste au moment où sa perte de cheveux devient visible.”

ChatGPT a ensuite été invité à générer 20 nouveaux titres.

Des étudiants en psychologie de l’USC ont évalué l’humour de ces titres satiriques générés par l’IA sur la même échelle de sept points utilisée précédemment. Ils ont également évalué leur engagement envers la comédie et les nouvelles satiriques. Les étudiants ayant déclaré un plus grand intérêt pour la comédie ont trouvé les titres plus drôles, que ceux-ci soient générés par l’IA ou rédigés par des professionnels. Selon les notes moyennes, 48,8 % ont préféré les titres de The Onion, 36,9 % ont préféré ceux de ChatGPT, et 14,3 % n’ont pas exprimé de préférence.

“En moyenne, les participants ont évalué les titres comme également drôles, suggérant qu’ils ne pouvaient pas distinguer entre la qualité de l’humour généré par l’IA et celui écrit par des professionnels”, ont déclaré les chercheurs. “Ceci est remarquable étant donné le haut niveau des écrivains de comédie professionnels utilisés comme référence.”

Cette découverte est non seulement intrigante mais aussi préoccupante, comme l’ont souligné les chercheurs.

“Le fait que ChatGPT puisse créer de l’humour écrit qui égale ou dépasse les compétences de la personne moyenne et est comparable à certains écrivains de comédie professionnels a des implications significatives tant pour les fans de comédie que pour les professionnels de l’industrie”, ont-ils déclaré. “Pour les écrivains de comédie professionnels, nos résultats indiquent que les LLM [grands modèles de langage comme ChatGPT] pourraient représenter une menace d’emploi substantielle.”

---

Lis l’article original sur :  New Atlas

Lire plus :  AI-Managed Batteries Boost Capacity by 10% and Extend Life By 25%