Senior data-инженер

Дирекция мониторинга Agile в поисках системного аналитика с опытом работы в крупных проектах/продуктах (несколько команд разработки: front-end, back-end, DE и хранилище, BI и AdHoc-отчетность).

Команда разрабатывает уникальный по масштабу и сложности проект, призванный изменить систему управления Банком, сделав её прозрачной за счёт data-driven подхода. Продукт внедрен и используется в периметре Sbergile – Agile dashboard (известный также как «черный» дэшборд). Ежемесячная аудитория дэшборда составляет 4500+ уникальных пользователей. Продукт активно развивается и дорабатывается новыми фичами на основе требований и пожеланий заказчиков. Наша система мониторинга ежедневно используется руководством Банка для принятия стратегических решений, а количество задач растёт изо дня в день.

Вам предстоит:

• прорабатывать архитектуру хранилища данных, а также его интеграцию с внешними системами
• проектировать и разрабатывать витрины данных для целей аналитики и моделирования на тех. стеке: PostgreSQL, ClickHouse, SQL, Python, Kafka, Rest API, Qlik
• загружать, очищать и трансформировать большие объемы данных из различных источников
• мониторинг и оптимизация процессов загрузки, преобразования данных и сборки витрин
• разрабатывать инструменты для автоматизации рутинных задач.

Мы ожидаем:

• опыт работы в качестве Data Engineer / MLE от 3 лет
• знание SQL на продвинутом уровне (аналитические функции, подзапросы, хранимые процедуры, оптимизация запросов и анализ плана выполнения)
• опыт разработки ETL-процессов (партиционирование, секционирование, работа с временными рядами)
• уверенное владение Python для автоматизации
• опыт работы с Apache AirFlow, NiFi.

Будет плюсом:

• опыт создания AI-агентов и использования их в работе
• опыт разработки и оптимизации ETL-процессов для ClickHouse.

Мы предлагаем:

• гибридный формат работы (3-4 дня в офисе)
• годовой бонус и ежегодный пересмотр
• расширенный ДМС с первого дня + стоматологию и льготное страхование для семьи
• корпоративный университет Сбера, внутреннюю образовательную платформу, участие в IT-конференциях
• офис на Кутузовской с зонами отдыха и спортзалом
• льготную ипотеку в Сбере, корпоративную пенсионную программу, подписку СберПрайм с возможностью совместного использования на трёх близких, скидки от партнеров и сервисов группы компаний.