Москва
Создаем команду мечты!
Наша компания - это не просто производство. Мы создаем продукты, которые приносят радость в жизнь людей. Именно поэтому мы ищем в команду тех, кто разделяет наше стремление к развитию, любовь к своему делу и имеет желание делать мир лучше каждый день!
Мы предлагаем:
Обязанности:
Разработка:
проектирование и реализация новых витрин данных, слоёв (ODS / DDS / DM) в ClickHouse;
разработка и оптимизация ETL/ELT-пайплайнов в Apache Airflow (DAG'и, операторы, зависимости);
оптимизация запросов и схем хранения под нагрузку ClickHouse (партиционирование, материализованные представления, движки таблиц).
Сопровождение:
мониторинг состояния пайплайнов и хранилища, реагирование на сбои;
поддержка работоспособности существующей ETL-инфраструктуры;
взаимодействие с командой BI (Delta BI) по вопросам структуры и качества данных.
Развитие:
Участие в code review, формирование стандартов разработки внутри команды
Документирование архитектурных решений и логики пайплайнов.
Ключевые качества и требования:
ClickHouse — уверенный уровень: проектирование схем, оптимизация запросов, понимание движков (MergeTree-семейство), работа с репликацией;
Apache Airflow — разработка DAG'ов, кастомные операторы, управление зависимостями и расписаниями;
SQL — продвинутый уровень (оконные функции, CTE, сложные агрегации)
Понимание архитектуры DWH: слои, подходы к моделированию (Data Vault, Kimball или аналоги);
Опыт работы с источниками данных: реляционные БД, REST API, файловые источники;
Опыт работы с Delta BI или другими BI-инструментами;
Знание Python на уровне написания ETL-скриптов и операторов Airflow;
Опыт с системами мониторинга (Grafana, Prometheus или аналоги);
Понимание принципов CI/CD применительно к data-пайплайнам;
Опыт работы в команде с выстроенными процессами (git flow, code review, задачи в трекере).
Сделай мир вкуснее вместе с нами!
Мейджерпак Рус
Москва
Не указана