Senior Data Engineer
Starsza inżynierka danych / Inżynier danych (Data Engineer)
DEVTALENTS Sp. z o.o. · Warszawa
Opis stanowiska
Zakres obowiązków
- Projektowanie, wdrażanie i optymalizacja pipeline danych oraz procesów ETL/ELT dla dużych, zróżnicowanych zbiorów danych.
- Optymalizacja ingerencji, transformacji i dostarczania danych przy użyciu SQL, PySpark i Python.
- Wdrażanie najlepszych praktyk w zakresie kontroli wersji (Git), infrastruktury jako kodu (Terraform, Ansible) oraz CI/CD.
- Współpraca z zespołami Data Scientistów, Analistów i Product Managerów w celu projektowania modeli danych i architektur spełniających cele biznesowe.
- Monitorowanie, debugowanie i optymalizacja pipeline ETL pod kątem niezawodności, niskiego opóźnienia i efektywności kosztowej.
- Mentoring osób na stanowiskach mid-level i junior, promowanie kultury wymiany wiedzy i innowacji.
Wymagania
- Doświadczenie w SQL, PySpark i Python (6+ lat doświadczenia komercyjnego).
- Praktyczne doświadczenie z Apache Airflow, AWS Glue, Kafka, Redshift oraz obsługą dużych zbiorów danych.
- Znajomość Git, Terraform, Ansible oraz procesów CI/CD.
- Doświadczenie w pracy z AWS (Lambda, S3, CloudWatch, Kinesis) oraz architekturami serverless.
- Umiejętność projektowania skalowalnych systemów rozproszonych oraz budowania API (REST, GraphQL).
- Wykształcenie wyższe w zakresie nauk komputerowych lub pokrewnych.
- Poziom języka angielskiego min. B2.
Oferta
- Możliwość wpływania na decyzje dotyczące architektury danych i strategii platformy.
- Przejrzysta kultura wspierająca rozwój zawodowy i innowacje.
- Stałe możliwości szkoleniowe i udział w warsztatach z zakresu inżynierii danych.
Podobne oferty
-
Full-Stack AI Solution Engineer
Specjalistka / Specjalista ds. AI (Full-Stack AI Solution Engineer)
ok. 13 300-19 900 zł brutto / mies. -
Data Analyst
Analityczka / Analityk danych (Data Analyst)
ok. 9 300-13 900 zł brutto / mies. -
Internship - Testing & Automation
Stażystka / Stażysta ds. testowania i automatyzacji oprogramowania
-
LOCA & Containment Engineer
Inżynierka / Inżynier ds. bezpieczeństwa termohydraulicznego reaktorów jądrowych (LOCA & Containment)
-
Dynamics 365 CE Developer (Mid)
Specjalistka / Specjalista Dynamics 365 CE (Programistka / Programista)
Zdalnie