Старший Go разработчик, ML платформа

Привет! Это команда ML платформы.

Мы отвечаем за стандартизацию процессов MLOps и ModelOps, разрабатываем и поддерживаем сервисы и пакеты для решения задач:

• запуск пайплайнов машинного обучения,
• трекинг экспериментов,
• хранение и версионирование моделей и датасетов,
• инференс и мониторинг моделей.

Наша команда занимается разработкой сервисов и пакетов для всех DS и адаптацией инструментов ML инфраструктуры под потребности отдельных команд, кастомными интеграциями и исследованиями.

Ищем инженера, который готов вместе с нами развивать платформенную инфраструктуру и поддерживать высокий уровень инженерной культуры в компании.

Наш стек:

• GO с платформенными интеграциями
• Отлаженный командами SRE и RE Gitlab CI позволяющий проводить деплой сервисов и пакетов по кнопке.
• Python3.10 - 3.13, Poetry, Pydantic
• Kubernetes, Prometheus, Vault, Gitlab
• PostgreSQL, Redis, Clickhouse
• Выделение ресурсов по кнопке - базы, redis-ы, s3 бакеты.

Примеры задач:

• Разработка собственного сервиса по серриализации графов и последовательности запуска задач в этих графах (топологическая сортировка)
• Перезапуск графа вычислений с учетом изменений конфигурации/кода/артефакта
• Разработка и внедрение единого интерфейса просмотра логов во всех задач обучения или обработки данных
• Квотирование и мониторинг утилизации, расширение возможностей юзкейсов пользователей внутри
• Алертинг на метрики обучения и пороги существующих экспериментов по обучениюс моделями и подготовке данных
• Шаблонизация конфигурации задач и пайплайнов

Мы ожидаем:

• Опыт коммерческой разработки на GO, понимание тонкостей языка.
• Опыт в проектировании микросервисной архитектуры.
• Умение писать чистый, тестируемый код.
• Опыт работы c Git.
• Желание построить качественную ML Платформу и развивать ее.

Будет плюсом:

• Опыт работы с ML и понимание mlops-практик.
• Владение ЯП Python.
• Знаком с Airflow, Dagster, Prefect IO.