KI beantwortet etliche Fragen falsch: ChatGPT nicht fürs Programmieren geeignet
Forscher einer US-amerikanischen Universität haben die Programmierfähigkeiten von ChatGPT auf die Probe gestellt. Das Ergebnis der Studie ist erschreckend, denn die Text-KI beantwortete etliche Fragen zum Programmieren entweder falsch, ungenau oder sorgte aufgrund ihrer Formulierungsweise für Verwirrungen.
Der textbasierte KI-Bot ChatGPT vom Entwickler OpenAI sollte einem großen Publikum bekannt sein und ist mittlerweile in die Chefetagen großer Unternehmen vorgedrungen. ChatGPT sorgt dabei für großes Staunen, ob seiner Bandbreite an Fähigkeiten und Beantwortung von Nutzerfragen. Letzteres ist jedoch noch ein großer Schwachpunkt des "Alleskönners", denn die Antworten sind zumeist ungenau, daher nicht befriedigend, oder schlicht falsch, weshalb am Ende der Verarbeitungskette zwangsläufig weiterhin der Mensch stehen muss.
ChatGPT als Stütze beim Programmieren? Eher nicht
Dieser Problematik ist die Purdue University aus Indiana nun genauer nachgegangen und hat dazu eine Studie ausgearbeitet. Diese kommt zu einem vernichtenden Urteil für ChatGPT. Aber worum ging es im Detail? Die Forscher der Purdue University wollten herausfinden, wie akkurat ChatGPT Informationen zum Programmieren, Schreiben von Code etc. herausgibt und speiste die KI mit Fragen von der Webseite Stack Overflow, einem Internetforum, auf dem sich Software-Entwickler austauschen. 517 Programmierfragen waren es an der Zahl, mit denen sich ChatGPT auseinandersetzen musste. Bewertet wurden bei den Antworten der KI mehrere Aspekte, darunter Korrektheit, Konsistenz, Vollständigkeit und Prägnanz.
Mehr als die Hälfte der Antworten von ChatGPT auf die Programmierfragen, 52 Prozent, sollen ungenau gewesen sein, mehr als dreiviertel, 77 Prozent, unnötig lang. Als noch problematischer hätten es die Forscher erachtet, dass der eloquente Sprachstil der KI die Teilnehmer an der Studie häufig in die Irre führte. Es sei diesen schwergefallen, Ungenauigkeiten zu erkennen, insofern die Fehler nicht offensichtlich zu ermitteln waren. Interessant wie auch alarmierend zugleich: Trotz inkorrekter Antworten sollen fast 40 Prozent der Teilnehmer die Antworten von ChatGPT bevorzugt haben. Unter den bevorzugten Antworten haben sich wiederum 77 Prozent als falsch herausgestellt.
Auch interessant: Nvidia: Neues KI-Tool generiert "effizient" Bilder und passt auf eine Diskette
Die Forscher erklärten, dass ChatGPT nicht in der Lage dazu sei, kontextuelle Nuancen der Fragen zu erfassen, was in der Folge zu etlichen falschen Antworten führe. Die Lehre aus der Studie ist wohl daher, dass aktuelle generative KI nicht als unterstützendes Werkzeug beim Schreiben von Code geeignet ist, sogar kontraproduktive Auswirkungen beim Programmieren haben kann. Große Unternehmen wie Samsung, Google, Apple und Amazon haben den Einsatz generativer KIs wie ChatGPT für das Vorschlagen von Code entweder untersagt oder sprechen dafür Warnungen aus.
Quelle: Studie der Purdue University via Gizmochina
Hofe bei Dir überwiegen die Vorteile.
Ist mal so und mal so... manchmal verfluche ich es. Kann anstrengend sein. Aber versuche etwas positives daraus zu ziehen.
Deswegen werde ich nie ein großes Konzert oder Fußballspiel besuchen.
Und es gibt noch andere Nachteile der "Hochsensibilität".
Aber es gibt auch Vorteile: das man unter Umständen gewisse An oder Vorzeichen eher spürt.
Und alles intensiver erlebt und wahrnimmt.
Hoffe bei Dir überwiegen die Vorteile.
Deswegen werde ich nie ein großes Konzert oder Fußballspiel besuchen.
Und es gibt noch andere Nachteile der "Hochsensibilität".
Aber es gibt auch Vorteile: das man unter Umständen gewisse An oder Vorzeichen eher spürt.
Und alles intensiver erlebt und wahrnimmt.