Mid/Senior Data Engineer (Kraków/GCP)
Inżynierka / Inżynier danych (Data Engineer)
Capco · Zdalnie, Kraków
Opis stanowiska
Zakres obowiązków
- Projektowanie, tworzenie i utrzymanie skalowalnych pipeline danych oraz rozwiązań przetwarzania danych.
- Praca z dużymi zbiorami danych w środowiskach rozproszonych, wykorzystując technologie takie jak Apache Spark i Hadoop.
- Budowa i wsparcie rozwiązań opartych na chmurze Google Cloud Platform (GCP), w tym integracja danych z różnych źródeł.
- Implementacja transformacji danych, reguł walidacji i kontroli jakości.
- Diagnostyka problemów w pipeline danych oraz optymalizacja wydajności.
- Praca w środowisku Linux, w tym pisanie skryptów i operacje wdrożeniowe.
- Współpraca z zespołem Data Engineers, architektami i analitykami w celu przekształcania wymagań biznesowych w rozwiązania techniczne.
- Uczestnictwo w recenzjach kodu i przestrzeganie najlepszych praktyk inżynierii danych.
- Tworzenie i aktualizacja dokumentacji technicznej dotyczącej przepływów danych, zależności i procedur operacyjnych.
Wymagania
- 4–6+ lat doświadczenia w Data Engineering lub roli podobnej.
- Zaawansowane umiejętności programowania w Pythonie.
- Doświadczenie w pracy z Apache Spark, Hadoop oraz środowiskami rozproszonymi.
- Znajomość Linuxa i narzędzi wiersza poleceń.
- Doświadczenie w pracy z Google Cloud Platform (GCP) i usługami danych.
- Zrozumienie procesów ETL/ELT, transformacji danych oraz koncepcji pipeline.
- Znajomość SQL i pojęć związanych z bazami relacyjnymi.
- Zrozumienie praktyk jakości danych, monitoringu i rozwiązywania problemów.
- Znajomość Git i współczesnych praktyk rozwoju oprogramowania.
- Umiejętność pracy w środowisku Agile oraz współpracy z rozproszonymi zespołami.
- Biegła znajomość języka angielskiego (poziom B2).
Oferta
- Model współpracy B2B z możliwością pracy nad innowacyjnymi projektami AI i automatyzacji dla liderów branży finansowej.
- Elastyczny model pracy.
Podobne oferty
-
Senior Staff Product Engineer
Inżynierka / Inżynier Produktu (Product Engineer)
-
Associate Delivery Engineer (Poland)
Inżynierka / Inżynier dostaw (Delivery Engineer) w ubezpieczeniach (z językiem angielskim)
ok. 13 300-18 300 zł brutto / mies. -
Senior Product Engineer
Inżynierka / Inżynier Produktu (Product Engineer)
-
Staff Product Engineer
Inżynierka / Inżynier Produktu (Product Engineer)
Zdalnie -
Delivery Engineer
Inżynierka / Inżynier dostaw (Delivery Engineer)
ok. 24 800-31 700 zł brutto / mies.