Databricks Data Engineer
Inżynierka / Inżynier danych (Data Engineer) z technologią Databricks
Accenture · Zdalnie, Warszawa, Kraków
Opis stanowiska
Zakres obowiązków
- Projektowanie i wdrażanie skalowalnych pipeline danych (ETL/ELT) przy użyciu Databricks (batch i streaming), w tym Delta Live Tables.
- Budowanie i utrzymywanie modeli danych w architekturze Lakehouse i Medallion (warstwy Bronze, Silver, Gold).
- Tworzenie transformacji danych przy użyciu PySpark, Spark SQL i Delta Lake.
- Integracja różnych źródeł danych z chmury i środowisk enterprise w spójne, wysokiej jakości zestawy danych analitycznych.
- Współpraca z architektami, analitykami i naukowcami danych w celu dostarczania gotowych do produkcji produktów danych.
- Wdrażanie praktyk DevOps i DataOps, w tym kontrolę wersji opartej na Git, CI/CD oraz testowanie workflowów danych.
Wymagania
- Co najmniej 2 lata doświadczenia w pracy z bazami danych relacyjnymi lub analitycznymi, w tym użycie SQL, Python lub Spark w środowiskach produkcyjnych.
- Co najmniej 1 rok praktycznego doświadczenia w projektowaniu lub wdrażaniu procesów ETL/ELT przy użyciu Databricks i Apache Spark w chmurze.
- Znajomość modelowania danych i architektury, w tym doświadczenie w tworzeniu modeli koncepcyjnych, logicznych i fizycznych.
- Zaawansowane umiejętności w SQL, w tym optymalizacja i profilowanie zapytań dla dużych obciążeń danych.
- Doświadczenie w pracy z platformą Databricks, w tym Delta Lake i architekturą Lakehouse.
- Znajomość narzędzi DevOps i CI/CD w projektach inżynierii danych.
- Biegła komunikacja w języku angielskim.
Oferta
- Umowa o pracę w modelu hybrydowym (praca zdalna, biuro, wyjazdy do klientów w Europie).
- Indywidualne wsparcie mentora i ścieżka rozwoju zawodowego.
- Szerszy pakiet szkoleń (technicznych, miękkich, językowych) oraz dostęp do platform e-learningowych.
- Program wsparcia psychologicznego, prawniczego i finansowego.
- Opieka medyczna i ubezpieczenie na życie.
- Dostęp do platformy WorkSmile z szerokim pakietem benefitów (m.in. Multisport Card).
Podobne oferty
-
Full-Stack AI Solution Engineer
Specjalistka / Specjalista ds. AI (Full-Stack AI Solution Engineer)
ok. 13 300-19 900 zł brutto / mies. -
Data Analyst
Analityczka / Analityk danych (Data Analyst)
ok. 9 300-13 900 zł brutto / mies. -
Internship - Testing & Automation
Stażystka / Stażysta ds. testowania i automatyzacji oprogramowania
-
Lead Solution Architect (Banking Systems)
Architektka / Architekt rozwiązań bankowych (Lead Solution Architect)
Zdalnie -
LOCA & Containment Engineer
Inżynierka / Inżynier ds. bezpieczeństwa termohydraulicznego reaktorów jądrowych (LOCA & Containment)