Data Engineer

На данный момент мы ищем 1 middle/senior Data Engineer в "ДатаЛаб" на проект по построению DWH для "ВкусВилл".

Направление «ДатаЛаб» специализируется на Big Data, машинном и глубоком обучении и искусственном интеллекте с 2021 года. В составе направления более 30 специалистов. Гордимся тем, что создали для «ВкусВилл» предиктивную модель по прогнозированию сроков доставки, а также систему, которая рекомендует покупателям товары в мобильном приложении, что улучшает лояльность клиентов.

Что предстоит делать:

• Извлечение, преобразование, загрузка данных и их обработка, ETL/ELT (Python/Airflow);
• Формирование отчетов (Greenplum/Clickhouse);
• Создание и развитие процессов управления данными и их качеством;
• Оптимизация процессов поставки данных (Kafka/Spark/dbt);
• Работа с DWH.

Мы ждем от вас:

• Уверенный опыт программирования на Python (не менее 2-х лет);
• Уверенные знания SQL и опыт работы с базами данных;
• Опыт работы с Apache Airflow;
• Оптимизация SQL запросов;
• Опыт работы с GreenPlum/СlickHouse;
• Понимания концепций построения хранилищ данных (DWH);
• Опыт работы со Spark.