QA auto Engineer (AI Agent Testing)

Группа Компаний Орбита - ведущий разработчик цифровых решений, российская аккредитованная ИТ-компания.

Масштабный технологический проект с глубокой экспертизой в цифровизации бизнеса. Ключевые отрасли: государственный сектор, FinTech, HRTech, коммуникации и медиа, услуги, рынок недвижимости, travel.

Нам доверяют крупнейшие компании РФ, среди них: Т1, ВТБ, Иннотех, Альфа Банк, ОИС и другие.

Более 6 лет мы ведем собственную продуктовую и заказную разработку высокоэффективных цифровых решений.

В связи с расширением команды мы ищем QA auto Engineer (AI Agent Testing) в команду Крупного банка.

Платформа - MDM CRM (MS-SQL/.Net)
Мастер данные по клиентам. Развитие системы Клиентский MDM (Master Data Management).

Требования:

• Опыт автоматизированного тестирования от 2 лет

• Понимание принципов работы AI-агентов и LLM или сильная мотивация
  погрузиться в эту область

• Знает и умеет использовать инструменты разработки для работы (IDEA/PyCharm,
  Junit, REST-Assured, Allure)

• Умеет дорабатывать тестовые фреймворки и их расширения

• Умеет использовать SbringBoot (в случае Java)

• Умеет разрабатывать на Python/Java (уметь и писать читаемый код и
  поддерживаемый код)

• Умеет работать с версионированием кода и дистрибутивами

• Базовое понимание DevOps-практик и желание развиваться в этом направлении

• Инструменты разработчика в браузере (знать как посмотреть, какие запросы
  отправляются на сервер)

• Знает основные паттерны проектирования ПО и умеет применять их на практике;

• Знает SQL на любом уровне

• Умеет работать с инструментами для тестирования серверного API (Postman, SOAPUI и т.д)

• Опыт работы с системами контроля версий (Git) и CI/CD

• Умение формулировать четкие баг-репорты и тестовую документацию

• Опыт работы с Jira, Confluence

• Опыт тестирования мобильных приложений

• Опыт тестирование сложных систем с интеграционным взаимодействием

• коммуникация с ML- командой

Будет плюсом, если вы:

• Наличие сертификатов в области QA (ISTQB, CSTE, ISEB)

• Опыт тестирования банковского ПО

• Опыт работы OpenShift, DropApp

• Опыт тестирования LLM, чат-ботов, RAG-систем

• Навыки работы с векторными БД, промпт-инжинирингом

• Понимание основ машинного обучения и ограничений AI-моделей

Задачи:

• Разработка и выполнение тест-кейсов для проверки функциональности, логики и поведения AI-агентов;
• Тестирование диалоговых сценариев и интеграций с внешними системами;
• Проведение регрессионного, интеграционного и end-to-end тестирования;
• Проведение ПСИ;
• Валидация качества ответов агента: релевантность, точность, безопасность;
• Создание автоматизированных тестов для API, UI и бизнес-логики агента;
• Проверка тестовых датасетов;
• Анализ результатов проведения тестирования и подготовка сводного отчёта о тестировании релиза;
• Анализ логов, метрик и ошибок для выявления паттернов сбоев;
• Подготовка тестовых данных;
• естирование обучающих датасетов / валидация данных для обучения моделей
• Документирование багов, тест-планов и отчетов о качестве в Jira/Confluence
• Участие в код-ревью тестовых скриптов и спецификаций
• Работа в команде по методологии Agile

Мы предлагаем:

• Гибридный формат работы - ст.м. Технопарк, ул. Поклонная;

• Белую заработную плату, оформление согласно Трудовому кодексу РФ;

• Комфортный старт: 3 месяца плавного погружения под присмотром HR;

• Поддержку: IT-отсрочку и консультации HR/юристов;

• Прозрачные процессы и открытую коммуникацию;

• Работу на лучшем оборудовании без логирования времени, с фокусом на доверии и результате;

• ДМС: медицинское страхование за счет компании;

• Развитие: индивидуальный план обучения, посещение конференций и митапов, поддержка в развитии карьеры

• Личный бренд: возможность выступать на конференциях, митапах, публикация статей;

• Бенефиты: ежеквартальное обновление корпоративных скидок;

• Движ: организация вечеринок оффлайн и онлайн, предоставление мерча, проведение конкурсов и челленджей.

Откликайтесь, будем рады познакомиться лично!