QA Engineer (ML & Agentic AI)
Primary stack
Nice to have's
Job description
About the Position
QA Engineer (ML & Agentic AI)
Numer referencyjny: L/QAE/U/1024539
Lokalizacje:
- Kraków, Poland
- Katowice, Poland
- Lublin, Poland
Chcesz wyjść poza klasyczną automatyzację testów webowych i wejść w najbardziej dynamiczny obszar technologii? W Comarch szukamy QA Engineera, który pomoże nam weryfikować i zapewniać jakość zaawansowanych systemów opartych o Agentic AI oraz modele ML.
Będziesz odpowiadać za budowanie rozwiązań testowych dla autonomicznych agentów AI, walidację ich zachowań, spójności odpowiedzi oraz integrację testów z procesami CI/CD.
Responsibilities
- Testowanie Agentic AI: Weryfikacja autonomicznych agentów (planowanie zadań, wywoływanie narzędzi, odporność na halucynacje, jakość RAG)
- Automatyzacja: Projektowanie i rozwój frameworków testowych (głównie Java / REST Assured lub Python)
- Wydajność i Jakość: Testowanie API, analiza jakości danych wejściowych/wyjściowych oraz weryfikacja modeli AI na środowisku produkcyjnym
- Cooperation: Ścisła współpraca z zespołem Machine Learning przy wdrażaniu testów do pipeline'u CI/CD
Requirements
- Min. 2-3 lata doświadczenia w automatyzacji testów oprogramowania (Java lub Python)
- Dobra znajomość testowania API (np. REST Assured, Postman, PyTest) oraz narzędzi CI/CD (Git, Jenkins, GitLab CI)
- Zrozumienie wyzwań związanych z GenAI / LLM (RAG, prompt evaluation, halucynacje) lub silna motywacja do szybkiego wejścia w ten obszar
- Dobra znajomość języka angielskiego (min. B2)
Nice to Have
- Znajomość Pythona (jeśli Twoim głównym językiem jest Java) lub Javy (jeśli piszesz w Pythonie)
- Doświadczenie z dedykowanymi narzędziami do ewaluacji LLM (np. Promptfoo, Deepeval, LangSmith)
We Offer
- Prywatna opieka medyczna w Allianz - dostęp do specjalistów i badań diagnostycznych dla Ciebie i Twoich najbliższych
- System kafeteryjny - możesz wybrać pełne dofinansowanie do karty Multisport czy przeznaczyć środki na kulturę, wypoczynek lub sport i zakupy
- Możliwość pracy w modelu hybrydowym po okresie wdrożenia (2 dni pracy zdalnej, 3 dni pracy z biura)
- Możliwość korzystania z zaawansowanych narzędzi AI i Google Workspace
- Profesjonalny rozwój zawodowy - możliwość ścieżki kariery na stanowiskach eksperckich technicznych, biznesowych i managerskich
- Indywidualny plan szkoleń i konferencji
- Przyjazna atmosfera pracy w zgranych zespołach, o co dbamy m.in. poprzez udział w imprezach integracyjnych czy wspólnych inicjatywach dla lokalnych społeczności
- Możliwość udziału w akcjach i wydarzeniach promujących aktywny tryb życia
About the Company
Praca w IT w Krakowie
Poznajmy się
Jedno miejsce, wiele możliwości
Obejrzyj video
See Similar Offers
- Różne lokalizacje Full-stack Developer (Agentic AI) Programowanie
- Różne lokalizacje Key Account Manager Sprzedaż i Consulting
- Różne lokalizacje MLOps Engineer DevOps i Architekt
Recruitment Process Stages
- Znajdź interesującą Cię ofertę pracy
- Wypełnij i wyślij formularz aplikacyjny
- Sprawdź skrzynkę mailową. Otrzymasz od nas potwierdzenie złożenia aplikacji
- Jesteśmy w kontakcie
© COMARCH. This job description was sourced from the employer's public career page. TheJob is not the employer — we index the posting and route candidates to the source. All content rights and hiring decisions belong to the employer.
Finance,Trade,SME
About the Company Comarch, established in 1993 in Krakow, creates innovative IT solutions for companies in over 60 countries. The company specializes in ERP, CRM, IT security, telecommunications, and AI. It supports the finance, trade, and SME sectors, collaborating with global brands such as BP. Products, Services & Tech Stack Core Solutions: ERP CRM IT Security Telecommunications AI Technologies & Frameworks: Java 21+ Angular 22+ AI-Native ERP Project Scope & Target Clients Client Base: Finance Trade SMEs Engineering Scale: Large projects Complex engineering tasks
More at COMARCH
All 93 rolesQA Engineer / Tester (AI Validation Specialist)
COMARCH · Kraków +2
Product Owner
COMARCH · Gdańsk +2
IT Project Manager (sektor finansowy)
COMARCH · Gdańsk +2
Analityk systemowy (K/M/X)
COMARCH · Kraków +1