Datautforskerne Data engineer-rollen med Knut Arne Smeland
11 snips
Apr 7, 2025 Knut Arne Smeiland, dataingeniør i Glitni, deler sin lidenskap for data engineering. Han utforsker rollen til dataingeniører og hvordan de fungerer som bindeledd mellom kildesystemer og forretningsbrukere. I samtalen diskuteres utfordringer med datainnhenting og viktigheten av datakvalitet. Knut Arne understreker behovet for samarbeid mellom systemeiere og databrukere for å tolke data bedre, samt viktigheten av sikkerhet og håndtering av data, før de blir til applikasjoner.
AI Snips
Chapters
Books
Transcript
Episode notes
Analyser Behov Grundig
- Forstå kildesystemets data og forretningens behov.
- Undersøk hvordan kildesystemet håndterer endringer i datastruktur og format.
Datakvalitet
- Dårlig datakvalitet er en vanlig utfordring i data-engineering.
- Å fikse kildesystemet er den beste løsningen, men ofte ikke mulig.
Håndtere Teknisk Gjeld
- Logg teknisk gjeld og adresser rotårsaker når det er mulig.
- Kommuniser med kildeeiere for forbedringer og datakvalitet.
