Дата-инженер (MLOps)

Наша команда создает информационную платформу для решения аналитических и исследовательских задач в области создания продуктов и услуг на мировых финансовых рынках: торговля валютой, ценными бумагами, производными финансовыми инструментами.
Этот бизнес потребляет и порождает огромное количество данных, которые должны обрабатываться c целью:
∙ Разработки витрин данных и моделей машинного обучения
∙ Поддержки регулярных бизнес-операций
∙ Проведения Ad hoc анализа
∙ Подготовки регулярной аналитической и управленческой отчетности
Разрабатываемая нами информационная платформа – высоконагруженное решение, призванное обеспечить достижение всех этих целей.

Обязанности:

• Системная разработка, поддержка и оптимизация ETL-процессов и ML-моделей (MLOps) на платформах Greenplum и Hadoop
• R&D, реализация пилотов по выбору технологий и решений
• Поддержание технической документации в актуальном состоянии

• Опыт разработки на Python от 2х лет
• Опыт работы (администрирования) с популярными РСУБД, в том числе, средствами Python (Greenplum, Teradata, Oracle, MSSQL)
• Уверенное знание SQL
• Опыт работы с экосистемой Hadoop (Spark, HDFS, Hive, Oozie)
• Желательные:

• • Понимание основ облачных технологий и технологий виртуализации и контейнеризации (Kubernetes, Openshift, Docker)
  • Опыт работы с CI/CD решениями на базе Jenkins и Bitbucket/Git
  • Практический опыт с автоматизацией развертывания ПО
  • Знание основ администрирования ОС Linux
  • Создание моделей машинного обучения, прохождение курсов по машинному обучению
  • Знание специфики python для ml: библиотеки (catboost, lightgbm e t.c.), понимание как обучать и оптимизировать модели

• ДМС (включая стоматологию), страхование жизни и онкозаболеваний, психологическая поддержка.Возможность подключения ДМС для ближайших родственников.
• Удобная цифровая система адаптации с элементами геймификации, которая поможет быстро и интересно погрузиться в корпоративную жизнь и процессы компании
• 2 недели в рекреационном офисе в Геленджике с видом на море за счет компании
• Спортивные клубы (футбол, волейбол, настольный теннис, бег, йога и шахматы), ежегодный Фестиваль спорта и удобные спортивные зоны в каждом офисе
• Яркие корпоративные мероприятия — от тематических вечеринок до спортивных мероприятий и выездных праздников.
• 6 000+ специальных предложений от партнеров: от скидок в ресторанах и спортзалах до льготных условий на образование, недвижимость и авто.
• Удобная цифровая система адаптации с элементами геймификации, которая поможет быстро и интересно погрузиться в корпоративную жизнь и процессы компании
• Профессиональные комьюнити внутри компании — Team Lead Club, PM Community, QA-сообщества, комьюните аналитиков, архитекторов, хаб авторов, клуб наставников и др.
• Развивайтесь вместе с нами! Доступ к 400+ онлайн-курсам, большой библиотеке, а также оплата внешних обучений и профессиональных конференций за счет компании.
• Возможностью построения и планирования карьерного трека с помощью Карты карьеры от IBS