Senior Data Engineer
IDBC Kft Budapest, Central Hungary, Hungary
IT Services and IT Consulting · 201-500 employees
Applying here? Try the free cover letter tool — paste this posting and your résumé, no account needed.
About the role
Design, develop, and optimize data architectures and pipelines while creating reusable data products for analysts and data scientists. Provide mentorship and technical guidance to team members on data management standards and best practices.
What they look for
Requirements
Requires a degree in IT or a related field and over 10 years of experience in software or infrastructure development, with at least 4 years in data engineering. Proficiency in SQL, at least one programming language like Python or Scala, and experience with Azure-based data services are essential.
Full description
- Adatarchitektúrák és
adatfolyamatok tervezése, fejlesztése, optimalizálása és karbantartása az ETL és data lake elveknek megfelelően.
- Az adatarchitektúrához és
adatfolyamatokhoz kapcsolódó artefaktumok előkészítése, egyeztetése és átadása a platformcsapat számára, hogy azok más csapatok által is újrahasznosíthatók legyenek.
- Összetett technikai
adatkezelési kihívások megoldása az üzleti célok támogatása érdekében.
- Olyan adattermékek
fejlesztése elemzők, adattudósok és gépi tanulási mérnökök számára, amelyek növelik a csapat és a szervezet hatékonyságát.
- Adat- és analitikai
szakemberek támogatása, mentorálása és szakmai tanácsadása az adatkezelési szabványok és legjobb gyakorlatok alkalmazásában csapat- és szervezeti szinten.
- Közreműködés az
adatmérnöki és adattudományi területen megjelenő új eszközök és technológiák értékelésében, valamint a munkamódszerek és standardok meghatározásában és fejlesztésében.
- A folyamatos fejlesztés
előmozdítása képzések, kompetenciafejlesztési programok, valamint az analitikai adatmérnöki gyakorlatok, szabványok és folyamatok fejlesztésén keresztül.
Requirements
- Informatikai vagy
kapcsolódó területen szerzett diploma.
- Több mint 10 év
tapasztalat szoftver- vagy infrastruktúrafejlesztésben, ebből legalább 4 év adatmérnöki területen, elosztott számítási, big data vagy fejlett analitikai környezetben.
- Magas szintű SQL és
adatelemzési ismeretek, valamint legalább egy programozási nyelv (pl. Python vagy Scala) magabiztos használata.
- Tapasztalat
adatbázis-fejlesztésben és adatmodellezésben, ideális esetben Databricks/Spark és SQL Server környezetben; relációs, NoSQL és felhőalapú adatbázisok ismerete.
- Magabiztos ismeretek az
elosztott számítási rendszerek területén, előnyt jelent a Spark vagy a MapReduce technológiák használata.
- Gyakorlati tapasztalat
Azure-alapú szolgáltatásokkal, mint például az Azure Data Factory, Azure Databricks, Event Hub, Synapse és a Machine Learning szolgáltatások.
- Jó általános ismeretek az
adat- és analitikai terület alapfogalmairól, beleértve a dimenzionális adatmodellezést, ETL folyamatokat, adattárházakat, riportálást, adatirányítást, valamint a strukturált és strukturálatlan adatok kezelését.
- Unix rendszerek ismerete,
különös tekintettel a shell scriptingre.
- Alapvető hálózati
ismeretek, kapcsolódási és hibaelhárítási tapasztalat.
- Alapszintű ismeretek a
gépi tanulás, adattudomány, mesterséges intelligencia, statisztika vagy alkalmazott matematika területén.
- Kiváló kommunikációs
készség és magabiztos angol nyelvtudás; német nyelvismeret előnyt jelent.
Similar roles
-
Platform and Data Engineer
Booz Allen Hamilton Honolulu, Hawaii, United States · $62K–$141K/yr
-
Information Operations Data Engineer
Booz Allen Hamilton Stuttgart, Baden-Württemberg, Germany · $78K–$176K/yr
-
FBS Associate Data Engineer
Capgemini Brazil
-
Data Engineer, Consultant
Blue Shield of California Oakland, California, United States · $123K–$208K/yr
-
Senior Data Engineer (Databricks on Azure)
Devsu Argentina · $24K–$58K/yr
-
Data Engineer
Chubb Philadelphia, Pennsylvania, United States · $82K–$92K/yr