Avropsförfrågan Docker dbt konsult
Vi söker en erfaren data engineer med kunskap inom dbt och automatisering med CI/CD pipeplines. Konsulten ska stötta, vägleda och agera bollplank samt arbeta hands-on i utvecklingen av en ny analysplattform tillsammans
med ett befintligt team bestående av data engineers och BI-utvecklare. Utveckling kommer att ske både i Azure och on-prem, främst med programvara baserad på öppen källkod.
Dina arbetsuppgifter kommer vara att:
• Stötta teamet i tekniska vägval och arkitektur kring infrastruktur
• Designa och bygga automatiserade flöden inom plattformen
• Vara ett bollplank för strategiska och tekniska beslut
• Guida teamet i arbetet med molnbaserade lösningar
• Utveckla pipelines i Azure DevOps
• Utveckla Docker-containers
• Utveckla DBT-lösningar
För att lyckas med uppdraget behövs en bred förståelse för moderna analysplattformar och modern datahantering i hybrida miljöer. Eftersom vi eftersträvar automatisering i största möjliga mån behövs kunskap om pipelines för CI/CD. Rollen innefattar en stor del kommunikation och kräver eget driv och engagemang.
Krav på konsulten:
Ska ha förståelse för och praktisk erfarenhet av infrastruktur i Azure
Ska ha minst tre års hands-on-erfarenhet av automatisering av data pipelines
Ska ha erfarenhet av att sätta upp och drifta Docker-containers i produktionsmiljöer
Ska ha minst 3 års erfarenhet av Pythonprogrammering för script och piplineutveckling
Ska ha minst tre års erfarenhet av DevOps-principer och CI/CD
Ska ha minst 1 års praktisk erfarenhet av DBT
Ska ha erfarenhet av datamodellering
Ska godkänna att bli föremål för säkerhetsprövning
Ska ha minst 3 års erfarenhet av SQL programmering.
Ska ha förståelse för och praktisk erfarenhet av Kubernetes
Bör ha erfarenhet av att kravställa arkitektur för dataplattformar
Bör ha kunskap om Apache Beam och Apache Spark/PySpark
Bör ha förståelse för dataplattformsdesign och dataflöden i stor skala
Bör ha erfarenhet av att jobba agilt enligt SAFE-ramverket