AI Quality Engineering Team Lead
Aviva · Warszawa, hybrydowo
Opis stanowiska
Aviva Services Excellence Centre w Warszawie poszukuje AI Quality Engineering Team Lead, który będzie kształtował strategię oceny jakościowych rozwiązań AI, w tym modeli generatywnych i agentowych.
Zakres obowiązków
- Kierowanie procesem oceny jakości AI od analizy ryzyka po wdrożenie i monitorowanie.
- Ewaluacja zachowań modeli wieloetapowych (RAG, agentic AI) pod kątem poprawności, bezpieczeństwa, sesji i użycia narzędzi.
- Budowa reprezentatywnych zestawów danych i ocena ich jakości (zrównoważenie, brak wycieku, aktualność).
- Analiza błędów, halucynacji, sesji, biasów i dryfu behawioralnego.
- Tworzenie automatyzowanych pipeline’ów testowych, raportów i wzorców generowania dowodów.
- Współpraca z zespołami produktowymi, inżynieryjnymi i biznesowymi w celu wpływania na decyzje wdrażania.
- Mentoring AI Quality Engineers i budowanie kultury konstruktywnej krytyki.
Wymagania
- Co najmniej kilka lat doświadczenia w quality engineering, testowaniu oprogramowania, inżynierii danych lub pokrewnych dziedzinach.
- Praktyczne umiejętności w Pythonie, API, SQL oraz pracy z danymi strukturalnymi.
- Doświadczenie w ocenie modeli AI, automatyzacji testów i integracji z CI/CD.
- Umiejętność przekształcania wyników technicznych w przekonujące dowody dla stakeholderów.
- Doświadczenie w prowadzeniu zespołów w obszarach nowych lub niejednoznacznych.
- Silne umiejętności komunikacyjne i zdolność do konstruktywnego kwestionowania.
Oferta
- Umowa o pracę z bonusem za wyniki.
- Opieka medyczna prywatna (ENEL-MED), system benefitów (m.in. MultiSport).
- Dodatkowe przywileje rodzicielskie (6 tygodni urlopu dla drugiego rodzica, skrócony czas pracy po urlopie).
- Ubezpieczenie grupowe, plan akcji na akcje pracownicze, dodatkowy dzień wolny z okazji urodzin.
- Hybrid model pracy (kilka dni w miesiącu w biurze w Gdańsk Business Center, Warszawa).
- Dodatkowe urlopy (m.in. 2 tygodnie po 10 latach pracy), wsparcie psychologiczne, dostęp do platform e-learningowych.
- Program referencyjny dla pracowników, wsparcie dla osób z niepełnosprawnościami.
Podobne oferty
-
-
-
Zdalnie
-
Zdalnie
-
Zdalnie