Jobless Developer
Everstar logo

Posted 15 days ago

Open

QA Manual/Automation Engineer (AI Products)

Kiiv, KyivOn-siteFull-time

AI Summary

Builds QA processes from scratch and tests AI products, evaluating LLM responses for hallucinations, RAG accuracy, and prompt injection vulnerabilities while automating critical test coverage.

About this role

Ми — EVERSTAR, перша рекрутингова агенція в MilTech для тих, хто готовий створювати технологічне майбутнє.

Але досить про нас, розказуємо про головну вакансію.

Це роль в R&D-команді, де інженери різних напрямів разом створюють і вдосконалюють продукти, що вже довели свою ефективність у сотнях тисяч місій.

Команда розширюється та шукає QA Manual/Automation Engineer (AI Products), який/яка долучиться до розвитку існуючих рішень, тестування нових підходів і побачить, як його/її рішення проходять валідацію та масштабуються до сотень тисяч продуктів.

Які задачі чекають на тебе:

  • Побудова процесів якості з нуля: Формувати QA-стратегію, створювати та підтримувати тестову документацію (Test Plans, Test Cases, Checklists), вибудовувати стандарти тестування в команді.
  • Тестування ШІ-специфіки: Оцінювати якість та коректність відповідей моделей (відсутність галюцинацій LLM, точність RAG-систем, відповідність контексту та релевантність генерації).
  • Тестування безпеки (AI Security): Перевіряти стійкість систем до ін'єкцій промптів (Prompt Injection), витоків чутливих даних бекофісу та некоректного доступу до інформації.
    Комплексне тестування систем: Проводити функціональне, інтеграційне та регресійне тестування як UI-частини, так і внутрішніх API-сервісів.
  • Автоматизація тестування: Покривати критичний функціонал автоматизованими тестами для прискорення релізного циклу.
  • Співпраця з командою: Тісно взаємодіяти з Product Manager, бізнес-аналітиком та розробниками для уточнення вимог та запобігання дефектам ще на етапі проектування.

Необхідні навички та досвід:

  • Досвід роботи в галузі QA від 3 років (рівень Strong Middle / Senior).
  • Досвід вибудовування QA-процесів з нуля або активна участь у їхній трансформації.
  • Розуміння специфіки ШІ/ML-технологій (розуміння, як працюють LLM, RAG, які виклики виникають при їх тестуванні).Глибокі знання теорії тестування, вміння правильно проектувати тестову документацію та проводити тест-дизайн.
  • Готовність брати на себе відповідальність за якість продукту та самостійно приймати рішення.

Буде плюсом

  • Досвід роботи з Python, PyTest, Playwright, Postman та SQL.
  • Досвід тестування безпеки (Security / Penetration Testing) або тестування AI-безпеки.
  • Англійська мова на рівні Intermediate+ (для вільного читання технічної документації та досліджень).


Стабільність і прозорість

  • оформлення через Дія.City
  • конкурентна компенсація, бонуси та премії

Команда і підтримка

  • сильне середовище інженерів
  • баді та менторство на старті
  • підтримка команди у процесі роботи і розвитку

Баланс і комфорт

  • 24 дні відпустки + вихідний у День народження
  • гнучкий графік та до 10 днів remote на рік
  • офіс у Києві (правий берег) з усім необхідним для роботи

Здоров’я

  • медичне страхування після випробувального терміну
  • консультації з психологом

Розвиток

  • компенсація навчання, курсів
  • доступ до корпоративної бібліотеки

Додатково

  • бронювання військовозобов’язаних (за наявності Резерв+)
  • релокаційна підтримка для кандидатів з інших міст або країн

Skills

AI Security TestingAPI TestingFunctional TestingIntegration TestingLLM TestingPlaywrightPostmanPrompt Injection TestingPytestPythonQARAG TestingRegression TestingSQLTest CasesTest DesignTest Plans

Explore related jobs

Browse these categories

Market data for this role

All reports →