Разработка и оптимизация ETL/ELT-процессов.
Разработка и поддержка агрегатов и витрин данных для BI-систем.
Оптимизация производительности ClickHouse.
Работа с большими объемами данных и обеспечение их надежности и целостности.
Совместная работа с аналитиками и другими командами для улучшения доступности и понятности данных.
Опыт работы в роли Data Engineer от 1 года.
Знания и практический опыт работы с сервисами:ClickHouse - оптимизация запросов, партиционирование, агрегации;
Airflow - оркестрация и планирование пайплайнов;
Liquibase - контроль версий схем и миграции данных;
RabbitMQ - понимание как работает, как забирать данные;
Kafka - понимание как работает, как забирать данные с помощью Clickhouse.
Понимание принципов построения ETL/ELT-процессов и архитектур потоков данных.
Уверенные знания SQL и Python.
Москва
до 5000 USD