Data Engineer (Microsoft Fabric)
Inżynierka / Inżynier danych (Data Engineer)
Scalo · Warszawa, hybrydowo
150 zł brutto / godz.
Opis stanowiska
Zakres obowiązków
- Projektowanie i implementacja pipeline’ów w Microsoft Fabric oraz notebooków PySpark.
- Onboarding źródeł danych (plikowych i bazodanowych) z walidacją techniczną i standaryzacją formatu.
- Realizacja transformacji danych, przygotowanie danych wsadowych oraz implementacja reguł walidacji jakości.
- Wersjonowanie zestawów danych i zapis metadanych przebiegu procesów.
- Współpraca z zespołem ryzyka przy definiowaniu reguł przekształceń danych.
- Zapewnienie zgodności z regulacjami prywatności i bezpieczeństwa danych.
- Optymalizacja procesów pod kątem wydajności i kosztów.
- Udział w projekcie realizowanym w branży ubezpieczeniowej.
Wymagania
- Minimum 3 lata doświadczenia jako Data Engineer w projektach produkcyjnych.
- Praktyczna znajomość Python (PySpark) oraz SQL w pracy z dużymi zbiorami danych.
- Doświadczenie z platformami chmurowymi do przetwarzania danych, takimi jak Microsoft Fabric, Azure Synapse lub Databricks.
- Znajomość architektury warstwowej danych (medalionowej) oraz formatów Delta i Parquet.
- Doświadczenie w pracy z systemem kontroli wersji Git oraz wdrożeniach CI/CD.
- Gotowość do podpisania NDA oraz przejścia procesu weryfikacji bezpieczeństwa.
- Certyfikat DP-600 lub DP-700 jest mile widziany.
Oferta
- Możliwość pracy w różnorodnych projektach z obszaru Software, Data i Cloud Services.
- Zaangażowanie w inicjatywy presealsowe oraz eksperckie.
- Dostęp do opieki medycznej, karty sportowej oraz platformy kafeteryjnej.
- Stawka do 150 PLN/h w modelu B2B.
- Model współpracy hybrydowy (1 dzień w tygodniu w Warszawie).
Podobne oferty
-
E58I0: Marketing Analyst-Senior (ID)
Analityczka / Analityk marketingu (Senior)
-
Software Engineer II, Backend
Programistka / Programista backend (Backend Engineer)
ok. 21 600-31 600 zł brutto / mies. Zdalnie -
System Engineer II
Inżynierka / Inżynier systemów (DevOps)
-
Software Engineer II
Programistka / Programista (Software Engineer II)
-
Solution Architect/Tech Lead
Architektka / Architekt rozwiązań IT (Solution Architect) / Tech Lead
Zdalnie