In der aktuellen Folge LdN 366 sind aus meiner Perspektive zahlreiche Ungenauigkeiten zum Thema KI/ML/LLM enthalten.
Unter anderem werden Machine Learning und KI nicht korrekt getrennt.
KI ist nicht nur wenn Modelle automatisch erstellt werden, sondern eben auch schon der Computer Gegner in der Schach-App.
Dementsprechend ist Künstliche Intelligenz auch kein neues Thema, es hat nur durch ChatGPT in der Öffentlichkeit deutlich mehr Aufmerksamkeit erhalten.
Wenn Programme sich selbst anlernen ist das Machine Learning.
Außerdem wird die Transparenz von ML Modellen nicht korrekt bewertet:
Es gibt durchaus Modelle, welche nachvollziehbar für Ersteller und Anwender sind (zb. Entscheidungsbäume).
ChatGPT als Large Language Modell erstellt keine Bilder. ChatGPT erstellt vielmehr intern Aufrufe an andere Programme, die dann Bilder und Stimmen generieren können.
ChatGPT wiederum ist kein Modell, das sind dann GPT4.0 / GPT3.5 Turbo etc.
Auch die Darstellung, wie gelernt wird, ist eher unvollständig. Die meisten Modelle werden mit fertigen Daten trainiert, das sind bei Chat Modellen dann u.A. Websiten die gescrapet werden, zum Beispiel das Lage Forum. Es gibt Modelle, die immer wieder/ dauerhaft neu trainiert werden, das ist aber der geringste Anteil.
Hier hätte man zum Beispiel ReCaptcha erwähnen können.
LLMs sind nicht deterministisch:
Jeder Algorithmus ist deterministisch, es werden bevor GPT3.0 arbeitet noch einige pseudo zufällige Wert mit eingebracht, um diverse Antworten zu erzeugen.
[…]