ОАО "Центр банковских технологий" приглашает на работу QA-инженера (ИИ/ML-тестирование) (middle) на проект "Суверенная платформа искусственного интеллекта".
Ваша задачи:
- полный цикл тестирования продукта «Платформа ИИ»: смоук, регрессионное, функциональное-нефункциональное, нагрузочное;
- тестирование корректности ответов чатбота (в т.ч. на чувствительные темы);
- проверка работы RAG, text2SQL, вызова агентов;
- проверка результатов работы искусственного интеллекта;
- нагрузочное тестирование (50–100 пользователей одновременно);
- валидация соблюдения этических и правовых ограничений;
- автоматизация тестов (pytest, Playwright и др.)
Важно у кандидата следующее:
- опыт тестирования ИИ-систем или сложных SaaS-продуктов;
- понимание специфики тестирования LLM (hallucinations, bias, safety);
- умение писать тест-кейсы для нечётких сценариев;
- внимательность к деталям и этическим аспектам;
- знание Python (либо любого другого языка программирования) для автоматизации тестов.