Senior Data Engineer

Senior Data Engineer som ansvarar för att designa och bygga skalbara datapipelines och infrastruktur för Smart SMS. Rollen sitter i ett team som stödjer data scientist-, analyst- och produktteam för ML- och analysbehov.

Det här kommer du att göra

• Underhålla och förbättra ingest-pipelines för miljarder event dagligen
• Stödja team i byggande och optimering av komplexa pipelines
• Samarbeta med andra team för att identifiera plattformsproblem
• Utveckla verktyg och ramverk för att förbättra dataplattformen
• Sätta upp bästa praxis för mjukvaru- och datautveckling

Det här söker de

• Erfarenhet av orkestreringsverktyg som Airflow
• Erfarenhet av att arbeta med stora datamängder
• Erfarenhet av att bygga komplexa ETL-pipelines
• Erfarenhet av molnleverantörer som GCP
• Starka programmeringskunskaper i Spark med Scala och Python

Kompetenser

• Airflow
• Spark
• Scala
• Python
• GCP
• CI/CD
• Jenkins
• Git

Sammanfattning skriven av StartupJob utifrån företagets annons. Hela annonsen finns på företagets webbplats.