“Scary”: ChatGPT a passé l’Abitur bavarois à la deuxième tentative

Expérience
ChatGPT a passé l’Abitur bavarois à la deuxième tentative : c’est pourquoi l’IA est désormais “plus intelligente”

ChatGPT est passé d’étudiant à problèmes à nerd : en quelques mois, le chatbot s’est considérablement amélioré dans la résolution des examens du secondaire. Mais pourquoi est-ce?

Allemand, histoire, mathématiques, éthique et informatique – l’intelligence artificielle (IA) ChatGPT devait faire ses preuves dans ces cinq matières et résoudre des tâches d’examen de lycée. Pas plus tard qu’en février, le chatbot avait échoué aux tâches d’examen de l’année dernière, que les linguistes informatiques de Bayerischer Rundfunk (BR) lui avaient présentées. Le programme a reçu des notes insuffisantes et a échoué dans presque toutes les matières.

Dans une autre tentative, les IA ont récemment été confrontées aux questions d’examen de cette année. Cela a commencé avec les tâches du baccalauréat d’histoire en 2023. Ici, entre autres, l’évolution de la société du XVe au XIXe siècle avec l’importance du chemin de fer et la position de la population juive ont été interrogées. Judith Bruniecki, professeur d’histoire au lycée de Munich-Moosach, a attribué à ChatGPT une note de deux pour les solutions fournies par ChatGPT. “L’IA a des difficultés, surtout lorsqu’il s’agit d’évaluer quelque chose, de le peser et peut-être même de sortir des sentiers battus”, a déclaré Bruniecki à BR. Le programme a reçu un trois plus pour avoir résolu les examens d’histoire en 2022.

ChatGPT fonctionne de manière plus approfondie et “à un niveau toujours très élevé”

L’IA s’est également améliorée en matière d’éthique – d’un quatre moins à un deux moins. “Par rapport à la dernière fois, alors que l’IA venait juste de passer, c’est un grand pas en avant”, déclare Winfried Kober, professeur d’éthique au Ludwig-Thoma-Gymnasium de Prien. Dans l’ensemble, les réponses seraient bien formulées et clairement adaptées à la tâche à accomplir. Bien que Kober ait constaté qu’il y avait un manque de termes techniques à certains endroits, il a néanmoins reconnu une augmentation globale des performances.

Le chatbot a également montré de nettes améliorations en allemand. En février, un professeur d’allemand a commenté sa performance avec les mots “beaucoup de radotage, peu de substance” et lui a donné trois points. Cela aurait échoué à l’examen. Lorsqu’on lui a demandé d’interpréter une parabole d’Ilse Aichinger, ChatGPT a fait du bon travail. “Je pense que la langue est toujours d’un niveau élevé”, déclare Christoph Willing, professeur d’allemand au lycée St. Anna de Munich. Il a attribué dix points à l’IA pour son interprétation approfondie et approfondie du texte, ce qui correspond à deux moins.

Un enseignant trouve l’amélioration des performances de l’IA “un peu effrayante”

Le chatbot s’est montré tout aussi convaincant en maths. “Alors qu’au dernier tour on lisait parfois des charabia incompréhensibles, cette fois les réponses sont très bien structurées et la solution est presque toujours efficace et facile à comprendre”, explique Thomas Spindler, professeur de mathématiques à la Luisen – Lycée de Munich.

Cependant, l’IA a fait l’augmentation la plus sérieuse dans le domaine de l’informatique. Elle a échoué aux affectations Abitur de 2022 et a échoué avec deux points. Maintenant, elle a obtenu un total de onze points, une note de deux. Hermann Kees, professeur d’informatique au Joseph-Bernhard-Gymnasium de Türkheim pense : « L’IA a fait beaucoup de bien et je trouve ce développement presque un peu effrayant.

Progressez grâce à un nouveau modèle

Mais pourquoi l’IA s’en sort-elle mieux dans tous les domaines aux examens du secondaire de cette année ? En février, le modèle basé sur GPT 3.5 résolvait encore les problèmes. Le GPT 4.0 désormais disponible peut traiter relativement plus de données et est plus précis dans la sortie de texte. Selon BR, GPT 4.0 est “plus puissant et, si vous voulez, plus intelligent”.

Sources: BR“Spiegel“