ML/LLM/EVAL разработчик

Москва, Озерковская набережная, 30

Метро: Новокузнецкая

Описание вакансии

Обязанности:

Разработка, проектирование и описание RAG-архитектуры (Retrieval-Augmented Generation)
Разработка и внедрение решений на базе ML/LLM для поиска, обработки и анализа документов
Реализация и оптимизация механизмов поиска информации, работы с embeddings и векторными базами данных
Разработка backend-сервисов на Python, работа с SQL и интеграция языковых моделей в существующую архитектуру программных продуктов
Разработка систем оценки качества AI-решений (Evaluation): формирование тестовых наборов, измерение точности поиска и ответов, выявление ошибок и проведение сравнительного тестирования моделей и версий системы
Анализ причин ошибок и оптимизация качества, производительности и стабильности ML/LLM-решени
Разработка механизмов контроля качества и предотвращения регрессий при изменении моделей, промптов и компонентов RAG-системы.

Требования:

ML/LLM: практический опыт работы с большими языковыми моделями, RAG-архитектурой, поиском и обработкой документов, embeddings и векторными базами данных
Разработка: уверенное владение Python и SQL, опыт разработки backend-сервисов, интеграции моделей и работы с существующей архитектурой программных продуктов
Evaluation: опыт построения систем оценки качества AI, формирования тестовых наборов, измерения точности поиска и генерации ответов, выявления ошибок и сравнительного тестирования моделей
Оптимизация: опыт повышения точности, производительности и стабильности ML/LLM-решений, анализа причин ошибок и предотвращения регрессий
Знание английского языка, (опыт кодингf на английском) b1- b2, фокус на письменную речь

Условия:

Официальное трудоустройство с соблюдением всех требований ТК РФ
Фиксированная окладная часть +годовой бонус по результатам работы
График 5/2, пн-чт: c 9.00-18.00, пт: с 9.00 до 16.45 (гибридный формат)
Офис в шаговой доступности от ст. м Павелецкая/Новокузнецкая/Третьяковская (Озерковская наб.,30)
Полис Добровольного медицинского страхования со стоматологией после полугода работы - медицинское обслуживание в лучших клиниках города
Корпоративные скидки на страхование для сотрудников
Активная корпоративная жизнь: конкурсы, тимбилдинги, участие в социальных мероприятиях

Посмотреть контакты работодателя