Tencent AutoCodeBenchmark: LLMs beim Programmieren

Feedback zur Sendung?
Schreibe uns einen Kommentar

Diese Sendung soll nie aufhören?
Unterstütze die Metaebene

China — Schweden — Goatmire — Open Vehicle Control System — Sonic Pi — Nerves — Trellis — Tolino — Dithering — Applekram — LLMs und Halluzinationen AutoCodeBenchmark — Røde Call Me

Ralf ist verhindert und wir begrüßen dafür erneut Luka in unserer Runde. Roddi ist zurück aus China und berichtet von seiner Reise an die chinesische Ostküste. Tim und Luka wiederum waren in Schweden und erzählen von ihrer Teilnahme an der Goatmire-Konferenz.

Wir reden über das Open Vehicle Control System, einem zu einem Elektroauto umgebauten Verbrenner-Polo, der komplett durch Open Source Software gesteuert wird, über ein weiteres Computational Music System namens Sonic Pi, die IoT-Distributions- und Betriebsplattform Nerves des Elixir-Ökosystems und einen Badge-Prototyp für den 39C3, den Tolino-E-Reader, Dithering und ein wenig den in der letzten Woche vorgestellten Applekram.

Dann nehmen wir uns noch mal AI vor und schauen auf das Paper von OpenAI wie sie glauben das Halluzinationsproblem in den Griff bekommen zu können und den AutoCodeBenchmark bei dem Tencent 30 LLMs auffordert in 20 verschiedenen Programmiersprachenen 6800 Programmieraufgaben zu lösen und ihr werdet nicht glauben, was dabei am besten abgeschnitten hat.

Dauer: 3:09:09

• Tim Pritlove
  • @timpritlove@mastodon.social
  • Website
  • Letterboxd
  • Bluesky
  • Amazon Wishlist
  • Liberapay
  • SEPA-Überweisung via Online-Banking-Software
  • Paypal
• roddi
  • GitHub
  • Mastodon
  • Website
  • Amazon Wishlist
• Luka Dornhecker
  • GitHub
  • Mastodon
  • Website
  • Linkedin
  • Letterboxd

Für diese Episode von Freak Show liegt auch ein vollständiges Transkript mit Zeitmarken und Sprecheridentifikation vor.

Bitte beachten: das Transkript wurde automatisiert erzeugt und wurde nicht nachträglich gegengelesen oder korrigiert. Dieser Prozess ist nicht sonderlich genau und das Ergebnis enthält daher mit Sicherheit eine Reihe von Fehlern. Im Zweifel gilt immer das in der Sendung aufgezeichnete gesprochene Wort. Formate: HTML, WEBVTT.

Shownotes