Привет! Мы ищем Data Engineer на проекты крупной FMCG-компании.
Основные задачи:
- Разработка витрин данных в рамках развития дата-платформы;
- Интеграция источников данных на платформу;
- Разработка дата-пайплайнов для обработки потоковых и пакетных данных;
- Контроль качества данных;
- Участие в код-ревью;
- Выполнение оптимизации, рефакторинг и поддержка решений.
Наши ожидания:
- Опыт от 4-х лет на позиции Data Engineer;
- Отличное знание SQL, Python, PySpark/Scala;
- От 2 лет опыта работы с Yandex Cloud Platform/ Azure/ AWS;
- Опыт работы на проектах с использованием Kafka, CDC-решений, S3, Airflow, Apache Spark, Clickhouse, Postgres;
- Знание Docker, Kubernetes, понимание работы CI/CD процессов;
- Знание Git, GitLab;
- Опыт разработки ETL-процессов;
- Понимание современной архитектуры построения хранилищ данных;
- Уровень английского не ниже intermediate.
Мы предлагаем:
- Удаленный формат работы по московскому часовому поясу;
- Оформление в аккредитованную ИТ-компанию;
- ДМС.
Интересно предложение? Ждем ваш отклик!