
KI-Update – ein heise-Podcast KI-Update kompakt: Mistral ML4, Cohere, KI-Empfehlungen, KI klont Indie-Spiele
43 snips
Oct 30, 2026 Pierre Stock, Wissenschaftler und Vice President of Science bei Mistral, spricht über ML4: eine Billion Parameter, offene Gewichte und effiziente Nutzung auf wenigen GPUs. Außerdem geht es um Coheres Milliardenfinanzierung, den unbemerkten Einfluss von KI-Empfehlungen auf Fachleute und den Kampf der Indie-Games gegen KI-Klone. Dazu: neue KI-Steuerung bei GitHub und Oracle sowie Amazons nächste Alexa-Generation.
AI Snips
Chapters
Transcript
Episode notes
ML4 Verbindet Eine Billion Parameter Mit Effizienz
- ML4 aktiviert pro Token nur einen Teil seiner insgesamt einer Billion Parameter und bleibt dadurch bei der Inferenz effizient.
- Pierre Stock erklärt, dass 49 Milliarden aktive Parameter bessere Ergebnisse als ein dichtes 50-Milliarden-Modell liefern können.
ML4 Passt Dank Quantisierung Auf Vier GPUs
- Mistral veröffentlicht die Gewichte trotz der enormen Modellgröße, weil Forschungslabore ML4 quantisiert auf vier GPUs betreiben können.
- Hochschulen erhalten damit Zugang zu Spitzen-KI für Forschung, Prüfung und Cyberabwehr.
Mistrals Eigener Cluster Spart Wochen Beim Start
- Mistral brachte das Pre-Training auf dem eigenen Cluster in nur einer Nacht zum Laufen.
- Forschung und Cluster-Team arbeiteten dafür gemeinsam vor Ort; mit einem Cloud-Anbieter hätte die Fehlersuche laut Pierre Stock Wochen gedauert.

