Middle+ Data Engineer

Наша команда развивает масштабируемую платформу данных. Мы считаем метрики по процессам сопровождения всего банка, предоставляем аналитику и управленческую отчётность, а также готовим дата-продукты, которые потребляет множество подразделений банка.

Ищем человека, который готов организовывать оптимальную работу с данными, развивать архитектуру, внедрять новые технологии и актуальные концепции для хранения данных, принимать участие в разработке и готов быть наставником для младших сотрудников.

Наш текущий стек: PostgreSQL, Greenplum, Apache, NiFi, Airflow, Kafka, Python

Сейчас фокус на поставке NRT данных для AI агентов и ускорении работы с витринами данных путём внедрения Greenplum и Airflow.

Первый этап отбора на эту вакансию – общение с AI-рекрутером. После отклика вам на почту придет приглашение пройти первичное интервью с ГигаРекрутером в Telegram. Диалог займёт примерно 10 минут. Его задача — уточнить недостающие детали и ускорить рассмотрение вашей кандидатуры.

ГигаРекрутер только начинает свой путь, поэтому просим относиться с пониманием. Ваш опыт и участие помогут сделать его удобным и полезным!

Обязанности

• участие в проектировании и развитии архитектуры аналитического хранилища (30+ Тб)
• разработка и поддержка автоматизированных ETL/ELT процессов (создание интеграционного взаимодействия с источниками данных, настройка регулярных загрузок данных, NRT потоков)
• улучшение отказоустойчивости, мониторинга, алертинга и качества данных
• миграция DWH на целевую архитектуру
• сбор, обработка и парсинг "сырых" данных
• поддержка и развитие хранилища данных, оптимизация работы БД.

Требования

• уверенные знания SQL (оконные функции, CTE, процедурный язык PostgreSQL/Greenplum)
• опыт работы с Airflow
• опыт работы с PostgreSQL/ Greenplum в качестве DE
• знание основных понятий и концепций из области Data Warehousing
• опыт разработки витрин данных

Будет плюсом:

• опыт работы с Apache NiFi, Kafka
• опыт реализации и практического применения Data Vault.

Условия

• гибридный формат работы
• офис по адресу г. Москва, проезд 2-й Южнопортовый
• более 400 образовательных программ СберУниверситета для профессионального и карьерного развития
• гибкий дисконт по ипотечному кредиту, равный 1/3 ключевой ставки ЦБ
• расширенный ДМС, льготное страхование для семьи и корпоративную пенсионную программу
• бесплатную подписку СберПрайм+, скидки на продукты компаний-партнеров
• вознаграждение за рекомендацию друзей в команду Сбера.