Data Engineer
Data Engineer
Алматы, проспект Абая, 109В
Метро: АлатауОписание вакансии
- Участвовать в разработке отчетной системы;
- Разрабатывать и поддерживать batch ETL-процессы (Python, SQL, Airflow);
- Разрабатывать и поддерживать обработку потоков данных (Python, RabbitMQ);
- Дорабатывать и развивать хранилище данных, строить витрины данных;
- Интегрировать новые источники данных в DWH;
- Реализовывать проверки качества данных DQ;
- Внедрять новые инструменты по работе с данными в компании;
- В ходе работы выстраивать процессы коммуникации с заказчиками;
Нас интересует:
-
Хорошое знание SQL - оконные функции, сложные join'ы и подзапросы, опыт оптимизации больших SQL запросов;
- Понимание принципов работы реляционных и колоночных СУБД, опыт проектирования DWH моделирование данных, разбиение по слоям;
- Хорошее знание Python (навыки работы с Pandas будут плюсом), опыт построения data pipeline’ов при помощи Airflow;
- Владение инструментами - Git, Docker, навыки работы с NoSQL СУБД;
- Знание технологий DBT, Debezium, Greenplum, Spark, Data Lake, k8s, PowerBI, Apache NiFi.
Мы предлагаем:
-
Работу в крупнейшей финансовой группе страны с устойчивыми возможностями профессионального и карьерного роста;
-
Годовой бонус и премию ко Дню Независимости;
-
ДМС после прохождения испытательного срока;
-
26 календарных дней отпуска + дополнительные дни при важных жизненных событиях;
-
Медицинский check-up после 1 года работы;
-
Льготные условия на корпоративный паркинг;
-
Открытую корпоративную культуру: спортивные турниры, занятия йогой, корпоративные мероприятия;
-
Профессиональное развитие: тренинги, обучение и индивидуальный план развития;
-
Участие в новых проектах группы Halyk и возможность реализовывать собственные инициативы;
-
Формат работы: график 5/2, 09:00–18:00.
Навыки
- SQL
- DBT
- Debezium
- Greenplum
- Spark
- Data Lake
- PowerBI
- Apache NiFi
- Docker
- Python
- СУБД
- Airflow
- ETL-процессы
- DQ
- RabbitMQ
- DWH
- Git
- NoSQL СУБД
- Разработка ПО
- Постановка задач разработчикам
- Анализ требований
Адрес
Похожие вакансии
Analytics Data Engineer (DWH / BI Platform) Middle+ / Senior
Choco (ТОО Chocofamily)
Алматы
Не указана
Алматы
Не указана
Алматы
до 1000000 KZT
Алматы
до 1000000 KZT
