Data Engineer

Мы - аккредитованная IT-компания и технологический партнёр для бизнеса. Наша компания усиливает команды клиентов через аутстаффинг и участвует в разработке сложных IT-продуктов.
Мы ищем middle+ data-инженера и data аналитика на банковский проект

Обязанности:

• Проектировать и развивать DWH и ETL-ландшафт под большие объёмы данных
• Разрабатывать и оптимизировать data pipeline’ы на Apache Spark
• Работать с Greenplum: оптимизация запросов, партиционирование, распределение данных
• Проектировать архитектуру потоков данных и моделей (в т.ч. Data Vault 2.0)
• Настраивать оркестрацию (Apache Airflow, dbt и др.)
• Обеспечивать качество данных: мониторинг, алертинг, автотесты
• Развивать CI/CD для ETL (Jenkins / GitLab CI)
• Участвовать в развитии data-платформы и архитектурных решений
• Менторить команду и формировать best practices

• от 4-х лет в Data Engineering / DWH
• Глубокая экспертиза в Spark (RDD, DAG, shuffle, performance tuning)
• Уверенные знания Greenplum / MPP-систем
• Опыт построения и оптимизации сложных ETL-пайплайнов
• Понимание архитектуры DWH и моделей данных (Data Vault, Star Schema и др.)
• Опыт работы с экосистемой: Kafka / Hadoop / S3
• Владение Python и/или Java
• Опыт настройки ETL-инфраструктуры и оркестраторов
• Понимание мониторинга, качества данных и SLA

Будет плюсом:

• Опыт миграции DWH (например, Oracle → Greenplum)
• Разработка внутренних ETL-фреймворков
• Опыт стандартизации процессов и data governance
• Наставничество

• Официальное трудоустройство в штат компании "Пятый элемент"
• Мы аккредитованная it компания, а это значит, что нашим сотрудникам доступна льготная ипотека для it специалистов, а также отсрочка от частичной мобилизации
• Работа полностью удаленно
• При необходимости выдаем технику
• ДМС+стоматология