Von NLP, LLMs, Prompts und Ground Truth - Wie Company GPTs zum Leben kommen | Sebastian Blank

May 6, 2025

58:12

forum

Ask episode

view_agenda

Chapters

auto_awesome

Transcript

info_circle

Episode notes

Von NLP, LLMs, Prompts und Ground Truth - Wie Company GPTs zum Leben kommen | Sebastian Blank

Der Traum vom eigenen Unternehmens GPT, jetzt eine Sache von nur ein paar Klicks? Oder steckt doch mehr dahinter als die Marketingslides der Hersteller sagen? Darüber spricht Christian Krug, der Host des Podcasts „Unf*ck Your Data“ mit Sebastian Blank Head of Natural Language Processing bei inovex.

Ohne Frage die Veröffentlichung von ChatGPT und freie Verfügbarkeit von großen Sprachmodellen (LLMs) hat den Zugang zu generativer KI unfassbar beschleunigt. Wo die Vorgängermodelle oft noch auf einzelne Anwendungsfälle mühsam trainiert werden mussten, bringe diese Modelle neben Sprachverständnis auch eine gewisse Menge an Wissen mit. Das heißt sie sind oft schneller einsetzbar. Manchmal allerdings bezahlt man diesen Wissenvorsprung mit einer gewissen Ungenauigkeit, denn die Modelle neigen zum halluzinieren.

Denn oft ist die „Ground Truth“ hier nicht richtig transparent. Also was ist die „Wahrheit“ oder das gewünschte Ergebnis. Diese musste früher, wie beispielsweise „Spam“ oder „nicht-Spam“ eben noch mitgegeben werden.

Wenn wir jetzt die Genauigkeit der „alten“ Modelle mit den Möglichkeiten der LLMs kombinieren könnten, dann wäre das doch richtig schick, oder?

Ein Ansatz der in diese Richtung geht ist RAG die „retrieval augumented generation“. Hier wird den LLMs zumindest ein Teil der Ground Truth mitgegeben. Nämlich die Dokumente auf die sich die Antwort beziehen soll.

So kann man den Ergebnisraum etwas besser abstecken und ermöglicht neue Anwendungen. Wie den Vergleich von Dokumenten, der Jurist*innen das Lesen langer Regularien ersparten kann.

Wichtig hierbei wie immer. Testen, Testen, Testen. Und Nutzer*innen Feedback einholen.

Denn während die Modelle immer mehr zur Commodity werden, können die Prompts hier den Unterschied machen.

Apropos prompting – ein wichtiger Skill, aber kein neuer Job?

Warum? Das verraten wir alles in dieser Folge!

▬▬▬▬▬▬ Links: ▬▬▬▬

lAIer 8/9 zu ManusAI: https://open.spotify.com/episode/37MJNNnst1CoSXHaCPOnm8?si=27f82582f93c40b9

▬▬▬▬▬▬ Profile: ▬▬▬▬

Zum LinkedIn-Profil von Sebastian: https://www.linkedin.com/in/sebastian-blank/

Zum LinkedIn-Profil von Christian: https://www.linkedin.com/in/christian-krug/

Christians Wonderlink: https://wonderl.ink/@christiankrug

Unf*ck Your Data auf Linkedin: https://www.linkedin.com/company/unfck-your-data

▬▬▬▬▬▬ Buchempfehlung: ▬▬▬▬