Data engineer

Мы находимся в поисках Дата инженера в команду крупнейшего банка России, занимающуюся разработкой информационной платформы в интересах Департамента Глобальных Рынков (ДГР). Этот бизнес потребляет и порождает огромное количество данных, которые должны обрабатываться c целью: поддержки регулярных бизнес-операций; проведения Ad hoc анализа; подготовки регулярной аналитической / управленческой отчетности; разработки моделей машинного обучения, направленных на решение широкого спектра прикладных задач прогнозирования, классификации, кластеризации, выявления поведенческих паттернов и отклонений от них, сентимент-анализ и т.д.; разработки визуализаций и приложений для заказчиков.

Твои задачи:

• Проектирование и разработка корпоративной аналитической платформы (ПКАП);
• Системная разработка, поддержка и оптимизация ETL-процессов на платформах Greenplum и Hadoop;
• R&D, реализация пилотов по выбору технологий и решений;
• Поддержка промышленной эксплуатации разработанных решений;
• Поддержание технической документации в актуальном состоянии;
• Эффективное взаимодействие внутри команды и кластера.

• Опыт с экосистемой Hadoop (HDFS, Hive, Impala, Spark, Oozie, ...);
• Опыт работы с CI/CD решениями на базе Jenkins и Bitbucket/Git;
• Знание SQL, PL/SQL;
• Знание основ администрирования ОС Linux;
• Понимание построения хранилищ данных (DWH).

Будет плюсом:

• Начальная экспертиза в предметной области (финансовые рынки);
• Понимание основ облачных технологий и технологий виртуализации и контейнеризации;
• Практический опыт с автоматизацией развертывания ПО;
• Опыт администрирования РСУБД.

• Возможность работать из офиса в Москве (ул. Вавилова, 19) первые 2-4 месяца, потом в гибридном формате (3/2);
• Современная техника для эффективной работы;
• Психологическая поддержка за счет компании;
• Медицинское страхование для выезда за рубеж;
• Дважды в год - сессии профессионального развития, результатом которых является план индивидуального развития каждого сотрудника и получение обратной связи;
• Корпоративная культура со своими ценностями и традициями, в которой каждый сотрудник чувствует себя частью команды;
• Сообщества по интересам: Лига Спорта, Лига Music, Лига Интеллекта. Также есть возможность организовать своё сообщество при поддержке компании.