Москва, улица Вильгельма Пика, 14с3
Метро: Ботанический садSenior Data Engineer
Привет! Мы строим и развиваем корпоративную платформу данных и ищем: Senior Data Engineer для работы в небольшой инженерной команде.
Роль предполагает ответственность за разработку и последующую эксплуатацию решений от источников данных до аналитических витрин
Чем предстоит заниматься:
- Проектирование, разработка и сопровождение потоков данных от источников до аналитических витрин.
- Проектирование и развитие хранилища данных: модели данных, слои (ODS, DDS, витрины), согласованность и расширяемость структуры.
- Обеспечение стабильности и надёжности процессов: мониторинг, обработка ошибок, ретраи.
- Оптимизация SQL-запросов и производительности аналитических витрин.
- Взаимодействие с аналитиками и BI-разработчиками по требованиям к данным.
- Совместная работа с внешними подрядчиками: участие в проработке архитектурных решений и техническая приёмка результатов.
Что мы ожидаем:
- Опыт работы с промышленными и/или аналитическими СУБД (Oracle, MS SQL, PostgreSQL, Teradata, Vertica, Greenplum и др.), включая участие в выборе и сравнении решений.
- Глубокое знание SQL: разработка сложных запросов, анализ и оптимизация производительности, работа с планами выполнения.
- Использование Python для извлечения, трансформации и обработки данных, включая разработку и сопровождение рабочих решений.
- Опыт проектирования DWH и ETL / ELT-процессов, понимание принципов моделирования данных и их влияния на аналитику.
- Опыт промышленной разработки: Git-флоу, работа с задачами, участие в эксплуатации и мониторинге данных процессов.
- Будет плюсом: опыт работы с Airflow, dbt, ClickHouse, а также участие в проектах по миграции данных или построению корпоративных DWH.
Что мы предлагаем:
Москва
от 250000 RUR