Data engineer

Описание вакансии

Мы занимаемся разработкой платформы, которая решает задачу по формированию и управлению ИТ-командами. Профили сотрудников формируются и дополняются интерпретацией цифровых следов, при этом для каждого члена команды на основе собранных цифровых следов создаются рекомендации по траектории развития.

Ищем дата инженера для проектирования и поддержки ETL/ELT-пайплайнов и хранилищ данных. Вы будете строить надёжную инфраструктуру данных, на которую опирается вся аналитика и продуктовые решения компании.

Обязанности

Тебе предстоит:

проектировать и разрабатывать ETL/ELT-пайплайны
строить и поддерживать DWH и Data Lake
обеспечивать качество и доступность данных
оптимизировать производительность обработки данных
взаимодействовать с дата-аналитиками и дата-сайентистами.

Требования

Мы ждем от кандидата:

высшее образование
опыт работы в роли data engineer от 4 лет
уверенное знание Python
продвинутый SQL (оконные функции, CTE, оптимизация планов запросов)
опыт работы с Apache Airflow, Dagster или Prefect, DAG-подход, идемпотентность задач, backfill-стратегии
опыт работы с Apache Spark (PySpark/Spark SQL), Hadoop/HDFS, партиционирование, распределённые вычисления
опыт работы с Kafka, Kafka Streams, Apache Flink, Spark Structured Streaming, Docker, Kubernetes для продуктивных пайплайнов, CI/CD , Git
опыт использования LLM для генерации/рефакторинга ETL-кода и автогенерации тестов для пайплайнов; описание схем данных и контрактов пайплайнов в виде спецификаций (dbt-контракты, JSON Schema, Data Contracts) как основы для генерации кода.

Условия

Мы предлагаем:

офис рядом с метро Кутузовская (БЦ Poklonka Place)
формат работы гибридный
ежегодный пересмотр зарплаты и годовая премия
корпоративный спортзал и зоны отдыха
подписка Прайм с возможностью совместного использования на трёх близких
более 400 образовательных программ СберУниверситета для профессионального и карьерного развития
гибкий дисконт по ипотечному кредиту, равный 1/3 ключевой ставки ЦБ
расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа
вознаграждение за рекомендацию друзей в команду Сбера.