Data engineer
Techster Solutions Stockholm, Sweden
IT Services and IT Consulting · 2-10 employees
About the role
You will build and maintain ETL pipelines in Azure Databricks while translating business requirements into effective data products. Additionally, you will manage CI/CD processes, ensure data security, and monitor platform performance through incident management.
What they look for
Requirements
The role requires strong experience with Databricks, PySpark, and Kimball data modeling principles. Candidates must also be proficient in CI/CD practices using Azure DevOps and possess excellent communication skills in both Swedish and English.
Full description
Uppdragsbeskrivning
Vi söker en data engineer/analyst med intresse för både verksamhet och data för att bygga vidare på en redan etablerad dataplattform i Azure Databricks med Azure DevOps för CI/CD. Du ska vara en självgående konsult med erfarenhet av Databricks som kan möta verksamheten för att samla in kravbilden, och ta det till färdiga ETL-flöden och datamodeller
Uppgifter:
- Bygga och vidareutveckla befintliga ETL‑pipelines i Databricks (PySpark/SQL).
- Möta verksamhetens krav och hjälpa till att översätta affärskrav till färdiga dataprodukter
- Modellera data i guldlager och dokumentera lösningar.
- Sätta upp och underhålla CI/CD i Azure DevOps.
- Säkerställa rensningsrutiner och korrekt åtkomststyrning för data.
- Aktivt förbättra plattformens prestanda genom övervakning och hantering av jobblarm samt incidenter i ServiceNow.
Skallkrav:
- Databricks – utveckling med PySpark och Spark SQL.
- Datamodellering – erfarenhet av Kimball‑principer.
- Kommunikation – god förmåga i svenska och engelska, i tal och skrift.
- CI/CD – YAML‑pipelines och hantering av artefakter.
- Tester – enhets‑ och integrationstester.
- Dokumentation – arkitektur, datamodeller och drift
Similar roles
-
Senior Data Engineer
Otter.ai Mountain View, California, United States · $185K–$230K/yr
-
Data Engineer (Looker)
Zylun Philippines, Inc. Negros Occidental, Philippines
-
Data Engineer
Ledgebrook United States · $100K–$170K/yr
-
Data Engineer II
American Express Phoenix, Arizona, United States · $89K–$150K/yr
-
Data Engineer
The Cincinnati Reds Cincinnati, Ohio, United States
-
Data Engineer
University of Oregon Foundation Eugene, Oregon, United States · $100K/yr