Data Engineer

Проект по развитию сервисов платформы MWS Data

Обязанности:
- Разработка ETL-процессов на базе прототипов и технических требований;
- Изменение существующих ETL-процессов, согласно меняющимся бизнес-требованиям;
- Продуктивизация кода, DQ-проверок, постановка на регламент, контроль работы ETL-процессов;
- Оптимизация и рефакторинг кода на уровне запросов и конфигураций (SQL/Python/Spark/HDFS);
- Взаимодействие с Системными аналитиками, Инженерами данных, Второй линией поддержки, DevOps, другими смежными подразделениями;
- Оперативное решение инцидентов на уровне третьей линии поддержки;
- Работа с Централизованным OLAP-хранилищем (Hadoop) и слоем репликации витрин данных (Greenplum). Также возможна работа с PostgreSQL, Teradata, Clickhouse и другими БД.

Технический стек:
• StarRocks
• Iceberg
• SQL
• Python
• Hadoop
• HDFS
• HIVE
• Spark
• Airflow
• Linux CLI
• Greenplum или другая MPP-Database
• YAML-нотация

• Официальное оформление и стабильная зарплата;
• Формат работы: офис, гибрид или полная удаленка на выбор;
• Все льготы и преимущества работы в аккредитованной ИТ-компании;
• Обучение: международная сертификация и профильные курсы за счет компании, электронная библиотека, участие в профильных конференциях, митапы, корпоративный английский язык;
• Возможности: современный стек технологий, амбициозные задачи, масштабные проекты и перспективы для профессионального роста;
• Здоровье: ДМС, включая стоматологию, помощь на дому и психологическую поддержку;
• Спорт: корпоративные занятия в фитнес-центре, футбольная команда или компенсации спорта для дистанционных сотрудников;
• Партнерские программы и скидки для сотрудников в магазинах-партнерах;
• Комфортный офис с оборудованными кухнями и кофейными поинтами;
• Хорошо отлаженные процессы, отсутствие бюрократии, оформление документов через ЭДО;
• Сильная и дружная команда;
• Корпоративы и командные игры: живое общение и встречи оффлайн.