DontApply.Club
Login Register

QA Engineer - Machine Learning and Agentic AI

Comarch — Poland · Posted ~3 hours ago

Mid

Skills

test automation Java Python API testing REST Assured Postman PyTest Git Jenkins GitLab CI CI/CD GenAI LLM RAG prompt evaluation Promptfoo

🔓 Log in to save this job, tailor your resume & track your apply process — 7 days free, no card needed.

Log in to add to target list

Summary ✨ AI‑Generated

Join a quality engineering team focused on testing advanced AI and machine-learning systems. You will build automated testing solutions for autonomous agents, evaluate response consistency and behavior, test APIs, investigate AI-specific failure modes such as hallucinations, and integrate quality checks into CI/CD pipelines.

Highlights

Work at the intersection of quality engineering, machine learning, and agentic AI. The role offers the opportunity to validate autonomous AI behavior, build sophisticated testing solutions, and integrate AI testing into modern CI/CD workflows.

Description

Chcesz wyjść poza klasyczną automatyzację testów webowych i wejść w najbardziej dynamiczny obszar technologii? W Comarch szukamy QA Engineera, który pomoże nam weryfikować i zapewniać jakość zaawansowanych systemów opartych o Agentic AI oraz modele ML. Będziesz odpowiadać za budowanie rozwiązań testowych dla autonomicznych agentów AI, walidację ich zachowań, spójności odpowiedzi oraz integrację testów z procesami CI/CD. Profil pracownika Min. 2-3 lata doświadczenia w automatyzacji testów oprogramowania (Java lub Python)Dobra znajomość testowania API (np. REST Assured, Postman, PyTest) oraz narzędzi CI/CD (Git, Jenkins, GitLab CI)Zrozumienie wyzwań związanych z GenAI / LLM (RAG, prompt evaluation, halucynacje) lub silna motywacja do szybkiego wejścia w ten obszarDobra znajomość języka angielskiego (min. B2) Mile Widziane Znajomość Pythona (jeśli Twoim głównym językiem jest Java) lub Javy (jeśli piszesz w Pythonie)Doświadczenie z dedykowanymi narzędziami do ewaluacji LLM (np. Promptfoo, Deepeval, LangSmith) Twoje zadania Testowanie Agentic AI: Weryfikacja autonomicznych agentów (planowanie zadań, wywoływanie narzędzi, odporność na halucynacje, jakość RAG)Automatyzacja: Projektowanie i rozwój frameworków testowych (głównie Java / REST Assured lub Python)Wydajność i Jakość: Testowanie API, analiza jakości danych wejściowych/wyjściowych oraz weryfikacja modeli AI na środowisku produkcyjnymCooperation: Ścisła współpraca z zespołem Machine Learning przy wdrażaniu testów do pipeline'u CI/CD Dla ciebie Prywatna opieka medyczna w Allianz - dostęp do specjalistów i badań diagnostycznych dla Ciebie i Twoich najbliższychSystem kafeteryjny - możesz wybrać pełne dofinansowanie do karty Multisport czy przeznaczyć środki na kulturę, wypoczynek lub sport i zakupyMożliwość pracy w modelu hybrydowym po okresie wdrożenia (2 dni pracy zdalnej, 3 dni pracy z biura)Możliwość korzystania z zaawansowanych narzędzi AI i Google WorkspaceProfesjonalny rozwój zawodowy - możliwość ścieżki kariery na stanowiskach eksperckich technicznych, biznesowych i managerskichIndywidualny plan szkoleń i konferencjiPrzyjazna atmosfera pracy w zgranych zespołach, o co dbamy m.in. poprzez udział w imprezach integracyjnych czy wspólnych inicjatywach dla lokalnych społecznościMożliwość udziału w akcjach i wydarzeniach promujących aktywny tryb życia