ChatGPT-Feintuning: Wie man die KI optimal einsetzt

Wo ChatGPT schwächelt und welche Parameter des zugrunde liegenden Sprachmodells sich für unterschiedliche Antwortstile verstellen lassen, zeigt dieser Artikel.

Artikel verschenken
In Pocket speichern vorlesen Druckansicht 78 Kommentare lesen
Roboter umrundet von Sprechblasen

(Bild: Erstellt mit Midjourney durch heise online)

Lesezeit: 24 Min.
Von
  • Dr. Gerhard Heinzerling
Inhaltsverzeichnis

Die Relevanz von ChatGPT könnte kaum größer sein. Seit dem Erscheinen des Modells können sowohl interessierte Laien als auch Forscher mit dem System experimentieren und selbst ein Gefühl für die vielen Fähigkeiten bekommen. Damit hat es ChatGPT mit einem gewaltigen Knall aus der IT-Blase herausgeschafft und überzeugt mit menschenähnlicher Sprachfähigkeit. Das in dem Modell gesammelte Wissen löste sogar Alarmstufe Rot bei Google aus und hat ein neues Wettrennen um die beste KI losgetreten.

"ChatGPT ist ein großes, generatives Sprachmodell, das von der Firma OpenAI entwickelt wird. Es nutzt eine Technologie namens ‚Transformer‘ und wurde mit einer großen Menge an Texten trainiert. ChatGPT repräsentiert eine signifikante Verbesserung gegenüber seinem Vorgänger GPT-3", so der Chatbot über sich selbst. Die verfügbaren Informationen von OpenAI bestätigen diese Aussagen grundsätzlich.

Mehr zu ChatGPT und KI-Textgeneratoren
Dr. Gerhard Heinzerling

Dr. Gerhard Heinzerling hat 1999 über die Frage, wie Wörter im Gehirn gespeichert sind, promoviert. Danach arbeitete er als SAP-Berater und ist heute im Bereich der Bilderkennung mittels KI bei der Firma Arineo angestellt.

Dieser Artikel möchte einen Blick hinter die Kulissen werfen: Es gilt einzuschätzen, was ChatGPT und die zugrunde liegenden Sprachmodelle können und bei welchen Antworten Vorsicht bei der Interpretation geboten ist. Auch wenn OpenAI keinen kompletten Sourcecode freigegeben hat, so lassen sich doch einige Anhaltspunkte (PDF) in bisherigen arXiv-Veröffentlichungen finden.

Das war die Leseprobe unseres heise-Plus-Artikels "ChatGPT-Feintuning: Wie man die KI optimal einsetzt". Mit einem heise-Plus-Abo können sie den ganzen Artikel lesen und anhören.

Immer mehr Wissen. Das digitale Abo für IT und Technik.