Инженер данных, senior

Команда инсайт разрабатывает сервис клиентской аналитики. Цель проекта — развернуть и запустить BI-платформу для предоставления аналитических отчетов и мониторингов клиентам продуктового направления ЭДО.

• Разработка и поддержка ETL-процессов. Проработка интеграций с источниками данных: базы данных, API.

• Участие в разработке и проектировании хранилища данных, построение моделей данных.

• Построение витрин данных для аналитиков/бизнес-пользователей «под ключ» - от снятия ТЗ до проектирования и разработки готовой витрины.

• Разработка и доработка инструментов по работе с данными, написание библиотек, плагинов для фреймворков по работе с данными.

• Оптимизация производительности процессов по работе с данными.

• Обеспечение качества данных: проработка требований к качеству данных совместно с бизнес-заказчиками, разработка тестов и проверок для данных.

• Отличные знания SQL, опыт написания опыт оптимизации сложных запросов, умение работать с большими массивами данных. Понимание партиционирования и работы индексов.

• Уверенные знания Python, ООП, опыт написания плагинов\библиотек на Python.

• Практический опыт работы с API, понимание основ микросервисной архитектуры.

• Опыт работы с Clickhouse, Greenplum, понимание работы MPP-СУБД.

• Опыт разработки ETL-процессов, опыт работы с Airflow, Spark, NiFi.

• Понимание моделей хранения данных, знание основ проектирования DWH.

• Понимание основных структур данных и алгоритмов.

Будут плюсом навыки

• Проверки гипотез, знание основ статистики.

• Визуализации данных, опыт работы с любым фреймворком для визуализации данных.

Нетехнические требования

• Быть готовым общаться с коллегами из разных команд.

• Уметь задавать вопрос «Зачем?» и выявлять проблематику, докапываться до сути.

• Системно мыслить, уметь выделять главное, расставлять приоритеты.

• Аргументированно отстаивать свою точку зрения.

• Проявлять инициативу и самостоятельность.

• Уметь декомпозировать задачу на составляющие и понимать, из каких шагов складывается ее реализация.

Мы предлагаем

• Живое профессиональное комьюнити. В нашей функциональной зоне 160+ аналитиков. Мы проводим внутренние митапы, обмениваемся опытом, вдохновляем и поддерживаем друг друга на пути к общим целям.

• Свободу в достижении бизнес-целей. Мы доверяем экспертизе коллег и не любим микроменеджмент. Вы сами выбираете, как достичь нужного результата.

• Профессиональный рост за счет задач, влияющих на успех федеральной IT-компании.

• Поддержку и адаптацию. Плавная передача знаний внутри команды и наставник на период испытательного срока.

• Гибкое начало и окончание рабочего дня. Нам важна выполненная задача и результат, а не отработанное время.

• Отлаженные процессы. У нас распределенная команда, поэтому есть всё необходимое для работы: удаленное рабочее место, сервисы и компенсация расходов на интернет.