AI Quality Assurance Engineer

Про посаду

Приєднуйтесь до Innovecs на посаду Інженера з забезпечення якості ІІ для розробки та виконання стратегій якості для ІІ-керованих асистентів складу та автономних агентів.

Обов'язки

ІІ забезпечення якості

• Розробка та виконання стратегій якості для ІІ-керованих асистентів складу, копілота та автономних агентів.
• Створення оціночних рамок для LLM-базованих складських робочих процесів та агентських систем.
• Визначення та підтримка "золотих" наборів даних та еталонних сценаріїв для складських операцій.
• Перевірка рекомендацій, рішень та дій робочих процесів, створених ІІ.
• Виконання тестування на галюцинації, фактичні дані, заземлення та якість відповідей.
• Перевірка реалізацій RAG та точності вибірки.
• Розробка тестів траєкторії агентів для багатоетапних автономних робочих процесів.
• Проведення антиагентних тестувань, тестувань на ін'єкцію промптів та оцінювання порушень блокування.
• Моніторинг зміщення моделі, погіршення якості виходу та тенденцій продуктивності ІІ.

Автоматизація тестування та якість на підприємстві

• Створення та підтримка масштабовних автоматизаційних рамок для функціонального, API, інтеграційного та кінцевого тестування.
• Розробка точок контролю CI/CD для випусків ІІ та не-ІІ.
• Перевірка інтеграцій підприємства через WMS, ERP, TMS, OMS, WCS та сторонні платформи.
• Впровадження автоматизованих регресійних наборів для критичних для бізнесу складських процесів.
• Забезпечення готовності до випуску за допомогою тестування на основі ризиків та метрик якості.
• Виконання аналізу кореневих причин складних дефектів на рівні системи.
• Запровадження кращих практик якості в інженерних командах.

Управління та відповідність

• Визначення стандартів якості ІІ та методологій тестування.
• Підтримка відповідності EU AI Act, ISO 42001 та принципам відповідального ІІ.
• Підтримання готових до аудиту доказів якості та звітів з оцінювання.
• Встановлення вимірюваних KPI для надійності, безпеки та точностей бізнесу ІІ.
• Внесення в стандарти інженерії якості ІІ та Центри досконалості.

Міжфункціональна співпраця

• Співпраця з Інженером з ІІ продукту, Архітектором рішень та Лідером UX.
• Участь у оглядах дизайну рішень ІІ.
• Управління бізнес-вимогами складу та підтримання стратегій перевірки.

Вимоги

• 5+ років досвіду в забезпеченні якості та автоматизації тестування.
• 2+ роки досвіду тестування ІІ-додатків, LLM-рішень або агентських систем.
• Значні навички Python/ Java/ Javascript.
• Досвід роботи з Playwright, Selenium, Cypress або подібними фреймворками автоматизації.
• Глибоке розуміння методологій тестування програмного забезпечення та технік проектування тестів.
• Досвід тестування API, інтеграції та бази даних.
• Досвід роботи з CI/CD-піплайнами та практиками DevOps.
• Знання рамок оцінювання ІІ.
• Розуміння специфічних режимів відмов ІІ: галюцинації, ін'єкція промптів, атаки порушення блокування, зміщення моделі, проблеми упередженості та справедливості, збої RAG.
• Досвід роботи в хмарних середовищах (Azure або AWS).
• Розуміння архітектури MCP та інтеграцій агент-до-інструментів.
• Досвід роботи з LangSmith, Braintrust, MLflow, Arize або Evidently AI.
• Знання EU AI Act та рамок управління ІІ.

Буде плюсом

• Досвід у сфері ланцюжка поставок, логістики, WMS, TMS, OMS або ERP платформ.
• Сертифікація ISTQB CT-AI або еквівалентні сертифікати з тестування ІІ.
• Внески у фреймворки тестування ІІ або відкриті проекти.
• Досвід керівництва стратегією якості ІІ в кількох командах.
• Знання процесів експлуатації складу та виконання замовлень.

Ми пропонуємо

• Гнучний графік роботи та віддалений режим
• Конкурентоспроможна компенсація
• Повне обладнання/програмне забезпечення – все, що вам потрібно для роботи
• Відкрита культура, прозоре спілкування та топ-менеджмент на відстані рукостискання
• Медичне страхування, відпустка, лікарняні, свята, оплачувана відпустка по вагітності/батьківству
• Доступ до нашого центру навчання та розвитку: семінари, вебінари, навчальна платформа та розважальні заходи
• Віртуальні командні заходи та соціальні активності

Про компанію

Innovecs – глобальна компанія з цифрових послуг з присутністю в США, Великобританії, ЄС, Ізраїлі, Австралії та Україні. Команда Innovecs спеціалізується на програмних рішеннях у сфері ланцюжка поставок, медтехніки, технологій співпраці та ігор.

Вже п’ятий рік поспіль Innovecs включена до списку Inc. 5000, до списку найшвидшезростаючих приватних компаній у США, та до рейтингу кращих глобальних постачальників аутсорсингових послуг від IAOP. Нещодавно Innovecs була удостоєна престижної премії Global Good Awards за Employee Engagement & Wellbeing, отримала золото на Employer Brand Management Awards та була включена до рейтингу Global Top 100 Inspiring Workplaces.

Innovecs є роботодавцем, що забезпечує рівні можливості. Всі рішення з найму ґрунтуються на професійних кваліфікаціях, навичках та досвіді. Ми прагнемо до прозорого, заслуженого процесу найму, який запобігає дискримінації та забезпечує рівні можливості для всіх кандидатів. Під час процесу найму доступні розумні заходи для підтримки доступності та інклюзії.

Що кажуть наші люди

Innovecs культивує культуру інновацій та командної роботи, пропонуючи підтримуючу атмосферу та нескінченні можливості для професійного розвитку. Надихаючі люди тут дозволяють мені рости, вчитися новому та відкривати потенціал, про який я навіть не знав.

Аліна Гораї

Менеджер з доставки

Я працюю в Innovecs протягом 2,5 років. Компанія інвестує в команду за допомогою технічних курсів, програм менторства, страховки та спортивних переваг. Я задоволена своїм досвідом і з упевненістю рекомендую Innovecs.

Михайло Батурін

Старший інженер-програміст

Минуло більше шести років, з тих пір як я приєдналася до Innovecs. Це місце, де комфортно працювати та рости. Мій досвід наповнений цінними моментами, значущими зв’язками та можливістю бути частиною чогось більшого.

Марія Новосельська

Старший аніматор 2D

Innovecs надає все необхідне для роботи та саморозвитку, організовує заходи та мотивує людей до участі у семінарах, лекціях та ініціативах. У нас також є футбольна команда, яка бере участь у турнірах!

Артем Воронін

Молодший дизайнер руху

Я почала свій шлях на посаді Менеджера випуску ігор, гібридної позиції QA, яка включала комунікацію з операторами та постачальниками. Після року я стала керівником команди випуску ігор, створивши кваліфіковану та ефективну команду з нуля.

Ольга Коломійцева

Лідер QA

Мені подобається, що компанія небайдужа до своїх працівників як до людей. По-перше, ми сприймаємось як люди. Тоді як інші компанії вимагають від вас часу та зусиль для досягнення їхніх цілей, не надаючи нічого натомість, Innovecs дбає про емоційний стан своїх людей.

Андрій Босак

Спеціаліст з технічної підтримки

Подайте заявку зараз

ШУКАЄТЕ МРІЙНУ РОБОТУ?

Innovecs швидко розвивається, створюючи захоплюючі можливості для кваліфікованих та амбіційних професіоналів, як ви.

Подайте заявку зараз