Руководитель команды по построению дата-продуктов

Описание проекта:

Мы набираем IT специалистов в большую команду для работы на проектах для крупного российского банка.

Миграция данных розницы и МСБ из КХД в импортозамещенную платформу данных (Новая Платформа данных).
Делаем для себя (Домен розничные данные) и для смежных подразделений (Финансы, Опер блок, Казначейство, CRM, Риски).
Проект активно развивается с июня 23года. Команда домена розницы насчитывает порядка 60 сотрудников.

Есть выделенные продуктовые команды, а также команды архитектуры и сервисов разработки (стандартизируют подходы к разработке и предоставляют продуктовым командам сервисы автоматизации разработки).
Продуктовые команды домена розницы: Кредиты, Пассивы, CRM, Карты.
До марта 26года требуется мигрировать из КХД в НПД порядка 60% данных розничного периметра (данные розничных систем источников). МСБ также в скоупе в начальной фазе.

Ищем лидера продуктовой команды по построению хранилища. Мы ожидаем увидеть эксперта, способного одновременно глубоко погрузиться в аналитику, грамотно ставить задачи перед подчинёнными и качественно курировать создание новых элементов корпоративного хранилища данных. Нам нужен опытный «играющий тренер», работающий рука об руку с командой и оказывающий ей постоянную поддержку.

Стек:
• Spark, SparkStreaming, Scala, как язык для перекладки и обработки данных (ETL).

Хранение данных:
• ClickHouse - зона витрин и для отчетов BI;
• GreenPlum - публичная зона для обмена данными между доменами;
• IceBerg, HDFS, S3, - детальные данные Домена;
• На развитие в плане использование Tarantool, Cassandra;
• Оркестраторы: из пула Argo, Dagster, AirFlow;
• BI: FineBI, PowerBI, SuperSet;
• Среда доступа к данным через SQL: Trino.

Обязанности:

• Руководство командой аналитиков и разработчиков 5-8 человек, которая e2e, от сырого слоя до конечных витрин, реализует дата-продукты в новом хранилище данных;
• Формулировать четкие запросы к заказчику, собирать, обрабатывать и согласовывать полученные требования;
• Участвовать в проектировании модели данных для целевого хранилища;
• Формировать образ конечного результата и осуществлять контроль качества выполненной командой работы;
• Ставить задачи команде, сопровождая задачи на всех этапах жизненного цикла;
• Осуществлять поддержку и обучение аналитиков команды в части лучших практик и подходов;
• Проводить тестирование разработанных решений и консультировать конечных пользователей по вопросам эксплуатации созданных продуктов.

Требования:

• Релевантный опыт работы руководителем и/или ведущим специалистом в сфере аналитики хранилищ данных от трех лет;
• Хорошее знание и опыт применения методов и подходов к построению хранилищ данных (DWH), принципов проектирования информационной инфраструктуры и модели данных по слоям хранилища;
• Погружение в сферу розничной аналитики, понимание специфики банковских операций и финансовых показателей. В целом знание специфики банковских продуктов и отчетности по ним;
• Базовая теоретическая подготовка в области реляционных баз данных и практические навыки применения полученных знаний;
• Свободное владение SQL-запросами среднего уровня сложности, включая работу с подзапросами и оконными функциями;
• Умение эффективно пользоваться системой управления задачами (Jira, Confluence и аналогичные инструменты);
• Знакомство с основными методиками и циклами разработки программного обеспечения (Agile, Waterfall и прочими подходами) в области построения хранилищ данных;
• Понимание базовых принципов и механизмов функционирования ETL/ELT-процессов и готовность проводить детальное изучение и улучшение существующих бизнес-потоков;
• Будет плюсом опыт работы с распределенными файловыми системами типа S3, инструментами Impala, Trino или ClickHouse.

Условия:

• Работа в аккредитованной ИТ-компании;
• График работы: на испытательный срок работа в офисе, после успешного закрытия испытательного срока - гибрид (1-2 раза в неделю);
• ДМС для вас и вашей семьи после испытательного срока;
• Корпоративные онлайн и оффлайн мероприятия.