DataGen #167 - Masterclass | Tout comprendre sur Databricks avec Frederic Forest
5 snips
Nov 18, 2024 Frédéric Forest, Directeur Général et cofondateur de Datatorii, partage son expertise sur Databricks. Il discute des contextes d'adoption de Databricks et de son intégration avec des outils comme Azure. Frédéric aborde les avantages et inconvénients de cette plateforme, ainsi que la coopétition avec Microsoft. Il explique l'importance de la formation en data engineering et recommande des lectures clés pour maîtriser les fondamentaux. Une véritable masterclass pour tous ceux qui souhaitent plonger dans le monde du data!
AI Snips
Chapters
Books
Transcript
Episode notes
Le parcours de Frédéric Forest
- Frédéric Forest a un parcours éclectique, passant du game design à la finance avant de se spécialiser en data consultancy pour Microsoft et Databricks.
- Il a cofondé DataTory pour accompagner Microsoft dans la montée en puissance de Databricks sur Azure.
Le succès du modèle Lakehouse
- Le concept de Lakehouse, lancé par Databricks, centralise données pour l'IA, la data science et le data warehouse.
- Ce pattern est devenu la base quasi universelle des architectures data sur Azure.
Stack classique avec Databricks
- Une stack type Databricks comprend Azure Data Factory pour l'ingestion, Databricks pour la transformation, et Power BI pour la visualisation.
- Cette combinaison est recommandée pour bénéficier d'efficacité et d'intégration optimales sur Azure.
