Москва, Лесная улица, 9
Метро: БелорусскаяМы - Ви.Тех, аккредитованная ИТ компания.
Наша команда - 500+ счастливых сотрудников, это микс талантов, где каждый член важен, как ключевой элемент в коде.
Мы создаем решения для крупнейшей e-commеrce компании в России - ВсеИнструменты.ру.
"ВсеИнструменты.ру" – крупнейший интернет-магазин по продаже товаров для дома, дачи, строительства и ремонта.
О нас в цифрах:
Сейчас мы ищем Data Engineer
Мы ищем инженера, который будет развивать корпоративную платформу данных и DWH компании: модернизировать ETL-ландшафт, переводить процессы с SSIS на Apache Airflow 3 и внутренний Python-фреймворк, а также делать работу с данными надежнее и удобнее для аналитических команд.
Какие задачи тебя ждут:
Развивать корпоративную платформу данных и DWH;
Переводить существующие ETL-процессы с SSIS на Apache Airflow 3 и внутренний YAML-driven Python-фреймворк;
Разрабатывать и поддерживать надежные data-пайплайны;
Обеспечивать стабильную промышленную эксплуатацию: retry, backfill, идемпотентность, дедупликацию и корректную обработку сбоев;
Развивать проверки качества данных;
Оптимизировать SQL и работу с Microsoft SQL Server;
Развивать CI/CD-процессы для работы с данными;
Создавать переиспользуемые инструменты и self-service решения для аналитических команд;
Участвовать в развитии архитектуры DWH и подходов к моделированию данных.
Твоя суперсила:
Опыт работы Data Engineer от 3 лет;
Уверенный SQL и практический опыт работы с Microsoft SQL Server;
Python: ООП, модульная архитектура, type hints, тестирование, логирование, работа с REST API и БД;
Опыт работы с Apache Airflow или другим промышленным оркестратором;
Опыт работы с dbt или аналогичным SQL transformation framework;
Понимание ETL/ELT, batch- и near-real-time-обработки;
Умение строить надежные и отказоустойчивые data-пайплайны;
Опыт Git и CI/CD;
Опыт реализации Data Quality-проверок;
Понимание архитектуры DWH и организации слоев данных;
Знание подходов к моделированию данных: Kimball, Inmon, Data Vault, Anchor Modeling.
С нас:
Москва
от 230000 RUR