Аналитик данных

Описание вакансии

Мы из Департамента интегрированного риск-менеджмент, наш продукт «Витрины данных» состоит из витрин на Hadoop и GreenPlum.

Разработкой витрин данных занимаются несколько Agile-команд.

Цель витрин: сбор, подготовка и хранение данных, необходимых для расчета регуляторных риск метрик: Риск взвешенных активов (RWA), Экономического капитала (ECAP), Ставок Оценочного резерва, Ставок Пруденциального резерва; поставка данных для смежных бизнес-процессов.

Обязанности

анализ и уточнение требований к доработкам
прототипирование и разработка витрин данных на Hadoop: проектирование модели данных, написание SQL-запросов, сборка дистрибутивов, оптимизация кода
разработка выгрузок данных из витрин в смежные автоматизированные системы
проведение тестирования разработанного решения, сверки с эталоном
подготовка к внедрению функционала
сопровождение разработанной функциональности (участие в разборе ошибок и инцидентов по запросу от команды сопровождения; консультация коллег по логике работы потоков загрузки и т.д.)
коммуникации с заказчиком и смежными командами

Требования

опыт работы с реляционными\не реляционными БД и хранилищами данных в роли аналитика \ разработчика ETL-процессов \ инженера данных
опыт работы со стеком технологий hadoop, hdfs, hive, yarn, spark
уверенное знание SQL
опыт работы с большими данными, оптимизация
умение читать чужой код

Будет плюсом:

знание предметных областей: банки, кредитные риски
опыт взаимодействия/интеграции витрин данных с топиками Kafka/желание погружаться в данный процесс
опыт работы с Git, Bitbucket, Jenkins
опыт оптимизации SQL-запросов
знание Java, Python
опыт использования GigaChat, Kandinsky и аналогов в продуктах, навыки создания и использования AI-агентов.