COMARCH logo

QA Engineer (ML & Agentic AI)

COMARCH·Salary not specified

Primary stack

JavaPythonAPI TestingCI/CD

Nice to have's

PromptfooDeepEvalLangSmith

Job description

About the Position

QA Engineer (ML & Agentic AI)

Numer referencyjny: L/QAE/U/1024539

Lokalizacje:

  • Kraków, Poland
  • Katowice, Poland
  • Lublin, Poland

Chcesz wyjść poza klasyczną automatyzację testów webowych i wejść w najbardziej dynamiczny obszar technologii? W Comarch szukamy QA Engineera, który pomoże nam weryfikować i zapewniać jakość zaawansowanych systemów opartych o Agentic AI oraz modele ML.

Będziesz odpowiadać za budowanie rozwiązań testowych dla autonomicznych agentów AI, walidację ich zachowań, spójności odpowiedzi oraz integrację testów z procesami CI/CD.

Responsibilities

  • Testowanie Agentic AI: Weryfikacja autonomicznych agentów (planowanie zadań, wywoływanie narzędzi, odporność na halucynacje, jakość RAG)
  • Automatyzacja: Projektowanie i rozwój frameworków testowych (głównie Java / REST Assured lub Python)
  • Wydajność i Jakość: Testowanie API, analiza jakości danych wejściowych/wyjściowych oraz weryfikacja modeli AI na środowisku produkcyjnym
  • Cooperation: Ścisła współpraca z zespołem Machine Learning przy wdrażaniu testów do pipeline'u CI/CD

Requirements

  • Min. 2-3 lata doświadczenia w automatyzacji testów oprogramowania (Java lub Python)
  • Dobra znajomość testowania API (np. REST Assured, Postman, PyTest) oraz narzędzi CI/CD (Git, Jenkins, GitLab CI)
  • Zrozumienie wyzwań związanych z GenAI / LLM (RAG, prompt evaluation, halucynacje) lub silna motywacja do szybkiego wejścia w ten obszar
  • Dobra znajomość języka angielskiego (min. B2)

Nice to Have

  • Znajomość Pythona (jeśli Twoim głównym językiem jest Java) lub Javy (jeśli piszesz w Pythonie)
  • Doświadczenie z dedykowanymi narzędziami do ewaluacji LLM (np. Promptfoo, Deepeval, LangSmith)

We Offer

  • Prywatna opieka medyczna w Allianz - dostęp do specjalistów i badań diagnostycznych dla Ciebie i Twoich najbliższych
  • System kafeteryjny - możesz wybrać pełne dofinansowanie do karty Multisport czy przeznaczyć środki na kulturę, wypoczynek lub sport i zakupy
  • Możliwość pracy w modelu hybrydowym po okresie wdrożenia (2 dni pracy zdalnej, 3 dni pracy z biura)
  • Możliwość korzystania z zaawansowanych narzędzi AI i Google Workspace
  • Profesjonalny rozwój zawodowy - możliwość ścieżki kariery na stanowiskach eksperckich technicznych, biznesowych i managerskich
  • Indywidualny plan szkoleń i konferencji
  • Przyjazna atmosfera pracy w zgranych zespołach, o co dbamy m.in. poprzez udział w imprezach integracyjnych czy wspólnych inicjatywach dla lokalnych społeczności
  • Możliwość udziału w akcjach i wydarzeniach promujących aktywny tryb życia

About the Company

Praca w IT w Krakowie

Poznajmy się

Jedno miejsce, wiele możliwości

Obejrzyj video

See Similar Offers

  • Różne lokalizacje Full-stack Developer (Agentic AI) Programowanie
  • Różne lokalizacje Key Account Manager Sprzedaż i Consulting
  • Różne lokalizacje MLOps Engineer DevOps i Architekt

Recruitment Process Stages

  • Znajdź interesującą Cię ofertę pracy
  • Wypełnij i wyślij formularz aplikacyjny
  • Sprawdź skrzynkę mailową. Otrzymasz od nas potwierdzenie złożenia aplikacji
  • Jesteśmy w kontakcie

© COMARCH. This job description was sourced from the employer's public career page. TheJob is not the employer — we index the posting and route candidates to the source. All content rights and hiring decisions belong to the employer.

COMARCH logo
COMARCH

Finance,Trade,SME

About the Company Comarch, established in 1993 in Krakow, creates innovative IT solutions for companies in over 60 countries. The company specializes in ERP, CRM, IT security, telecommunications, and AI. It supports the finance, trade, and SME sectors, collaborating with global brands such as BP. Products, Services & Tech Stack Core Solutions: ERP CRM IT Security Telecommunications AI Technologies & Frameworks: Java 21+ Angular 22+ AI-Native ERP Project Scope & Target Clients Client Base: Finance Trade SMEs Engineering Scale: Large projects Complex engineering tasks

More at COMARCH

All 93 roles

Popular searches