ChatGPT4 auf dem Prüfstand

 

Wie schneidet die KI in Kryptografie-Prüfungen ab?

In einer Zeit, in der künstliche Intelligenz (KI) immer stärker in unseren Alltag integriert wird, stellt sich die Frage: Wie gut ist KI wirklich in der Lage, spezialisierte akademische Prüfungen zu bestehen? Drei Experten der Universität Siegen haben sich dieser Frage gewidmet und ChatGPT4, einen fortschrittlichen Chatbot von OpenAI, auf die Probe gestellt. Die Ergebnisse dieses Experiments sind überraschend.

Das Experiment

Die Forscher Prof. Bernhard Esslinger, Dr. Nils Kopal und Dr. Vasily Mikhalev von der Universität Siegen, die im Bereich der Kryptoanalyse und IT-Sicherheit tätig sind, haben ChatGPT4 drei unterschiedlichen Prüfungen im Bereich der Kryptografie unterzogen. Dieses Experiment wurde im Rahmen des Projekts „DECRYPT“ durchgeführt, das vom Swedish Research Council gefördert wird. Gleichzeitig betreuen die Wissenschaftler die E-Learning-Plattform CrypTool, die kryptografische Algorithmen und Verschlüsselungen für Studierende und Interessierte zugänglich macht.

Die Prüfungen

ChatGPT4 wurde drei Prüfungen unterschiedlichen Schwierigkeitsgrades vorgelegt:

  1. Eine mündliche Prüfung aus dem Bachelorstudium, die die Grundlagen der Kryptologie abfragt.
  2. Eine schriftliche Klausur aus dem Masterstudium.
  3. Eine Reihe komplexer Hausaufgaben aus dem Masterstudium, die umfangreiche Programmieraufgaben enthalten.

Die Bewertung der Antworten erfolgte neutral anhand der Kriterien, die auch für Studierende gelten. Die Prüfungsunterlagen stammten von verschiedenen Lehrstühlen aus Hessen und Baden-Württemberg.

Die Ergebnisse

Prof. Esslinger erklärt: „Das neue ChatGPT trainiert mit dem gesamten Internet. Wir haben die Prüfungen so gewählt, dass sie bisher nicht online verfügbar sind, um zu sehen, was die KI wirklich durch Logik leisten kann.“

Die Ergebnisse waren erstaunlich:

  • Mündliche Prüfung: ChatGPT4 erzielte 202 von 208 Punkten, was 97 Prozent entspricht.
  • Masterprüfung: Die KI erreichte 80,5 von 90 Punkten, was einer Richtigkeit von 89 Prozent entspricht.
  • Hausaufgaben: Bei den komplexeren Aufgaben erreichte ChatGPT4 eine Quote von 75 Prozent korrekter Antworten.

Diese Ergebnisse zeigen, dass ChatGPT4 durchaus in der Lage ist, anspruchsvolle Prüfungen zu bestehen. Allerdings offenbarten sich auch Schwächen, insbesondere bei der Lösung komplexer Rechnungen und Programmieraufgaben. Dr. Kopal bemerkt: „KI kann die Theorie sehr gut erklären, aber bei konkreten Zahlen kommen oft falsche Werte heraus.“

Die Schwächen der KI

Eine signifikante Schwäche zeigte sich bei den Programmieraufgaben. Hier machte ChatGPT4 Fehler, die auch Studierenden unterlaufen. Bei einer Aufgabe löste die KI sogar die falsche Aufgabenstellung. Dr. Kopal erläutert: „Das passiert Studierenden natürlich auch.“

Die Bedeutung für Studierende

Sollten Studierende also auf künstliche Intelligenz im Studium zurückgreifen? Die Experten raten davon ab. Prof. Esslinger betont: „Selbst wenn Studierende im Grundstudium KI nutzen, um Klausuren zu bestehen, werden sie spätestens in der mündlichen Prüfung auffallen.“

Herausforderungen und Zukunft der Prüfungen

Die Nutzung von KI stellt Dozierende vor neue Herausforderungen. Täuschungsversuche sind schwerer zu erkennen. Prof. Esslinger empfiehlt: „Wir sollten mehr mündliche Prüfungen machen und weniger Hausaufgaben vergeben, um zu prüfen, was die Studierenden selbst gemacht haben.“ Zugleich sei es wichtig, Studierende zu befähigen, KI verantwortungsbewusst zu nutzen. Prüfungen der Zukunft sollten origineller und praxisorientierter gestaltet werden.

Zitat-Quelle: IDW



Zur Quelle wechseln

Literature advertisement

Geld vernünftig ausgeben: Über die richtige Art von Sparsamkeit

Der Begriff Sparsamkeit bezieht sich nicht nur auf Geldangelegenheiten, sondern auf alles im Leben – den klugen Umgang mit der Zeit, den klugen Umgang mit der eigenen Fähigkeit, der eigenen Energie, und das bedeutet umsichtig zu leben, sorgfältige Lebensgewohnheiten. Sparsamkeit ist der wirtschaftliche Umgang mit sich selbst, mit seiner Zeit, mit seinen Angelegenheiten, mit seinem Geld, die vernünftigstmögliche Verwendung dessen, was wir von allen Ressourcen des Lebens haben.

Sparsamkeit ist nicht nur einer der Grundsteine für ein Vermögen, sondern auch die Grundlage für vieles, was eine hervorragende Eigenschaft hat. Sie verbessert die Möglichkeiten des Einzelnen. Die Ausübung der Sparsamkeit hat eine sehr gesunde Wirkung auf alle Fähigkeiten. Sparsamkeit ist in vielerlei Hinsicht ein Zeichen von Überlegenheit. Die Gewohnheit zur Sparsamkeit steht für Selbstbeherrschung. Sie ist ein Beweis dafür, dass der Mensch kein hoffnungsloses Opfer seiner Begierden, seiner Schwächen ist, sondern dass er Herr seiner selbst und seiner Finanzen ist.

Im Inhalt behandelte Punkte:
– Wirtschaft ist keine Schikane, sondern das planvolle Handeln zur Befriedigung von Bedürfnissen.
– Kapital ist der kleine Unterschied zwischen dem, was wir verdienen und dem, was wir ausgeben.
– Sparsamkeit ist nicht Geiz, sondern Vorsorge und die Art wie man sein Geld klug ausgibt.
– Falsche Sparsamkeit oder Verschwendung ist, wenn das Eingesparte weniger Wert ist, als der Aufwand, und das führt zur Armut.
– Ein kleiner Betrag, der regelmäßig über längere Zeit gespart wird, wächst zu einem Vermögen heran.
– Hinter jedem ehrlichen Vermögen steckt kluge Sparsamkeit.
– Man kann das gleiche Geld nicht zweimal ausgeben.
– Vertrauen genießt nur derjenige, der sein Geld vernünftig ausgibt, nicht aber derjenige, der es verschwendet.
– Glück ist eine geistige Einstellung, es ist der Zustand des Geistes, nicht der Zustand des Portemonnaies.
– Zeit ist kostbar. Nutze Sie die Zeit auf kluge Weise!
… u.a.

Es ist ein Buch mit wertvollen Ratschlägen, die jeder lesen sollte.

Hier geht es weiter …

Literature advertisement

Was sind Wirklichkeiten?

Wie kam es zur Entdeckung natürlicher Gesetze?
Lässt uns die Natur in ihre Werkstatt blicken?
Ist Erkenntnis subjektiv oder objektiv?
Wie hängen Bewusstsein und Natur zusammen?
Was ist unvergänglich in Raum und Zeit?
Wodurch wird wissenschaftliche Erkenntnis erst möglich?
Welche Reize überschreiten die Schwelle des Bewusstseins?
Was bedeutet die Welt der Werte für die Persönlichkeit?
Verfolgt die Natur einen Zweck?
Wo liegen die Grenzen des Gefühls?
Ist die Welt dem Untergang geweiht?
Wie kann man Krummes durch etwas Gerades messen?
Was ist es, das zwei große Denker den Menschen mitzuteilen haben?
Welche Wirklichkeit zeigen uns Traumbilder?
Kann die Mystik Unerklärliches erklären?
Wie wird die Zukunft werden?

Das sind die Fragen zu denen der Autor in diesem Buch Stellung bezieht und mit seinen Antworten im feuilletonistisch leicht verständlichen Stil den Leser fasziniert.

Hier geht es weiter …

Literature advertisement

Wie man seinen 24Std-Tag organisiert

Nach Ansicht des Autors Arnold Bennnett besteht das Leben der meisten Angestellten darin, nur für ihren Lebensunterhalt zu arbeiten, aber er glaubt nicht, dass sie wirklich leben. Bennett geht dieses Problem an, indem er ihnen vorschlägt, wie sie zusätzliche Zeit gewinnen können um daraus das Beste zu machen und die gewonnene Zeit für ein wirkliches Leben zu nutzen.
Dieses Buch hat in den letzten Jahren aufgrund der Explosion des Phänomens der Selbstverbesserung an Attraktivität gewonnen, und in der heutigen Welt große Bedeutung.
Der Humor des Autors, ebenso wie seine Scharfzüngigkeit und die teilweise sehr originellen Ansichten kommen besonders gut in diesem Werk zum Tragen.
Lesen Sie dieses Buch und Sie werden Zeit für das wirkliche Leben und dazu reichlich Lebensfreude gewinnen.

Hier geht es weiter …