Mid/Senior Data Engineer (Kraków/GCP)

Inżynierka / Inżynier danych (Data Engineer)

Capco · Zdalnie, Kraków

Opis stanowiska

Zakres obowiązków

  • Projektowanie, tworzenie i utrzymanie skalowalnych pipeline danych oraz rozwiązań przetwarzania danych.
  • Praca z dużymi zbiorami danych w środowiskach rozproszonych, wykorzystując technologie takie jak Apache Spark i Hadoop.
  • Budowa i wsparcie rozwiązań opartych na chmurze Google Cloud Platform (GCP), w tym integracja danych z różnych źródeł.
  • Implementacja transformacji danych, reguł walidacji i kontroli jakości.
  • Diagnostyka problemów w pipeline danych oraz optymalizacja wydajności.
  • Praca w środowisku Linux, w tym pisanie skryptów i operacje wdrożeniowe.
  • Współpraca z zespołem Data Engineers, architektami i analitykami w celu przekształcania wymagań biznesowych w rozwiązania techniczne.
  • Uczestnictwo w recenzjach kodu i przestrzeganie najlepszych praktyk inżynierii danych.
  • Tworzenie i aktualizacja dokumentacji technicznej dotyczącej przepływów danych, zależności i procedur operacyjnych.

Wymagania

  • 4–6+ lat doświadczenia w Data Engineering lub roli podobnej.
  • Zaawansowane umiejętności programowania w Pythonie.
  • Doświadczenie w pracy z Apache Spark, Hadoop oraz środowiskami rozproszonymi.
  • Znajomość Linuxa i narzędzi wiersza poleceń.
  • Doświadczenie w pracy z Google Cloud Platform (GCP) i usługami danych.
  • Zrozumienie procesów ETL/ELT, transformacji danych oraz koncepcji pipeline.
  • Znajomość SQL i pojęć związanych z bazami relacyjnymi.
  • Zrozumienie praktyk jakości danych, monitoringu i rozwiązywania problemów.
  • Znajomość Git i współczesnych praktyk rozwoju oprogramowania.
  • Umiejętność pracy w środowisku Agile oraz współpracy z rozproszonymi zespołami.
  • Biegła znajomość języka angielskiego (poziom B2).

Oferta

  • Model współpracy B2B z możliwością pracy nad innowacyjnymi projektami AI i automatyzacji dla liderów branży finansowej.
  • Elastyczny model pracy.

Podobne oferty

  • Senior Staff Product Engineer

    Inżynierka / Inżynier Produktu (Product Engineer)

    hyperexponential Warszawa, hybrydowo B2B
    • AI
    • Product engineering
    • Python
    • Rust
    • C/C++
  • Associate Delivery Engineer (Poland)

    Inżynierka / Inżynier dostaw (Delivery Engineer) w ubezpieczeniach (z językiem angielskim)

    hyperexponential Warszawa, hybrydowo Umowa o pracę
    • Bez doświadczenia
    • Python
    • Modelowanie predykcyjne
    • AI
    • Actuarial science
    • Insurance technology
    ok. 13 300-18 300 zł brutto / mies.
  • Senior Product Engineer

    Inżynierka / Inżynier Produktu (Product Engineer)

    hyperexponential Warszawa, hybrydowo B2B
    • AI
    • Product engineering
    • Python
    • Rust
    • C/C++
  • Staff Product Engineer

    Inżynierka / Inżynier Produktu (Product Engineer)

    hyperexponential Warszawa B2B
    • AI
    • Python
    • Rust
    • C/C++
    • Product engineering
    Zdalnie
  • Delivery Engineer

    Inżynierka / Inżynier dostaw (Delivery Engineer)

    hyperexponential Warszawa, hybrydowo Umowa o pracę
    • Python
    • Modelowanie predykcyjne
    • AI
    • Analiza danych
    • Insurance tech
    ok. 24 800-31 700 zł brutto / mies.