Middle/Senior QA Engineer (AI Products)
Primary stack
Nice to have's
Job description
Про посаду
Ascendix Technologies, партнер у сфері штучного інтелекту та технологій нерухомості, штаб-квартира якого знаходиться в Далласі, Техас, з офісами в Польщі, Португалії та Україні, шукає досвідченого Middle/Senior QA Engineer (AI Products) для приєднання до нашого відділу продуктів. Ми спеціалізуємося на рішеннях штучного інтелекту, Salesforce та розробці програмного забезпечення на замовлення, допомагаючи підприємствам оптимізувати свою діяльність за допомогою інноваційних технологій.
На цій посаді ви будете працювати з невеликою командою для забезпечення надійності як традиційної функціональності програмного забезпечення, так і функцій, керованих штучним інтелектом. Ви поєднуватимете ручне тестування, автоматизацію тестів та методи оцінки LLM для перевірки відповідей, створених штучним інтелектом, виявлення потенційних проблем та постійного підвищення якості продукту.
Якщо вам подобається вивчати технології штучного інтелекту, мислити критично щодо складних сценаріїв та проявляти ініціативу у формуванні процесів QA, ми хотіли б почути вас.
Обов'язки
- Взяти на себе відповідальність за якість продукту в наших рішеннях, пов'язаних з Salesforce, спочатку зосередившись на Ascendix AI Agent.
- Виконувати функціональне, регресійне та експлуатаційне тестування як детермінованих, так і недетермінованих функцій.
- Оцінювати відповіді, створені штучним інтелектом, на предмет точності, галюцинацій та правильного виконання дій.
- Розробляти, підтримувати та покращувати набори даних для оцінки LLM, критерії оцінювання та регресійні тести.
- Розробляти та підтримувати автоматизовані тести за допомогою Playwright та сучасних інструментів, що допомагають у роботі з ІІ.
- Співпрацювати з розробниками та бізнес-аналітиком у процесі розробки, керованому специфікаціями, переглядаючи специфікації та визначаючи чіткі критерії прийнятності.
- Встановлювати та постійно вдосконалювати процеси QA, включаючи підтримку навичок, правил та документації агентів штучного інтелекту у файлах Markdown.
- Досліджувати та відтворювати проблеми, повідомлені клієнтами, надаючи чіткі та практичні звіти про помилки.
- Проактивно виявляти ризики якості та пропонувати покращення для надійності продукту та практик тестування.
Вимоги
- 5+ років досвіду роботи в галузі забезпечення якості програмного забезпечення.
- Практичний досвід тестування програм за допомогою штучного інтелекту з недетермінованими результатами, такими як продукти на основі LLM, агентів штучного інтелекту або чат-ботів.
- Практичний досвід роботи з методами оцінювання LLM, включаючи тестові набори даних, критерії оцінювання, підходи LLM-як-судді та відстеження регресії.
- Досвід автоматизації тестів та підтримки автоматизованих тестових наборів.
- Тверді навички тестування API за допомогою Postman або аналогічних інструментів.
- Сильні аналітичні та критичні навички мислення, здатність оцінювати не тільки те, чи є відповідь, створена штучним інтелектом, неправильною, але й чому.
- Власницький підхід, проактивний підхід до вирішення проблем та готовність покращувати процеси QA.
- Хороші комунікативні та кооперативні навички, здатність ефективно працювати в невеликій розподіленій команді.
- Вільне володіння англійською мовою (B2+) або вище, як письмово, так і усно.
Буде плюсом
- Досвід роботи з Playwright (TypeScript або JavaScript).
- Досвід тестування Salesforce, включаючи Lightning, керовані пакети та набори дозволів.
- Знайомство з інструментами оцінювання LLM, такими як Promptfoo, DeepEval, Ragas або Langfuse.
- Досвід використання інструментів розробки, до яких входить штучний інтелект, таких як Claude Code, Cursor або аналогічних.
- Базові навички інженерії промптів.
- Досвід роботи з CRM-системами або даними про нерухомість.
Ми пропонуємо
Медичне страхування:
- 20 оплачуваних днів відпустки.
- 5 оплачуваних днів хвороби.
Кар'єрний та професійний ріст:
- B2B та віддалена співпраця.
- Кар'єрний розвиток та професійний ріст.
- Технічні огляди та 360-градусна оцінка.
- Співпраця з особистим прямим менеджером, технічними лідерами та наставниками.
Навчання та розвиток:
- Можливість компенсації за зовнішні заходи.
- Внутрішні можливості для обміну знаннями.
Корпоративний дух:
- Онлайн та офлайн заходи та командотворення.
- Дружня та підтримуюча атмосфера.
- Відкрите управління.
Про компанію
Ascendix Technologies є партнером у сфері штучного інтелекту та технологій нерухомості, штаб-квартира якого знаходиться в Далласі, Техас, з офісами в Польщі, Португалії та Україні. Ми спеціалізуємося на рішеннях штучного інтелекту, Salesforce та розробці програмного забезпечення на замовлення, допомагаючи підприємствам оптимізувати свою діяльність за допомогою інноваційних технологій.
Подайте заявку на цю посаду
ПІБ
Електронна пошта
Номер телефону
Профіль LinkedIn
Супровідний лист
Зв'яжіться зі мною через:
Telegram
Viber
Додайте ваше резюме (PDF, Doc, Docx). Макс. розмір - 2 МБ.
Надаючи цю форму, ви погоджуєтесь з Політикою конфіденційності Ascendix
© Ascendix. This job description was sourced from the employer's public career page. TheJob is not the employer — we index the posting and route candidates to the source. All content rights and hiring decisions belong to the employer.
IT / tech за описом ITJobs