Senior Data Engineer в команду CDP

О проекте

2GIS CDP – это внутренняя Customer Data Platform, лежащая в основе стратегии развития всего 2ГИС на ближайшие годы.

CDP объединяет данные из десятков источников, строит единые пользовательские профили, рассчитывает метрики, интересы и модели поведения, помогает запускать real-time персонализацию прямо в продукте и управлять персонализированной рекламой и коммуникацией.

Это стартап внутри большой компании – со свободой в архитектуре и технологиях, с задачами уровня highload и с реальным влиянием на бизнес-результаты.

О команде

Мы объединяем инженеров, аналитиков и ML-специалистов, которые строят систему, меняющую подход к данным в 2ГИС.

Работаем с большими объемами событий, продумываем архитектуру под масштаб и надежность, ценим простые и элегантные решения.

Каждый в команде влияет на архитектуру, подходы и направление развития CDP.

Наш стек

• Spark SQL
• ClickHouse
• Airflow

Стек только формируется – ты сможешь повлиять на его развитие и архитектуру.

Тебе предстоит:

• Анализировать более 600+ таблиц из разных источников на основе OpenMetaData, чтобы выработать алгоритм по подготовке данных для CDP.
• Проектировать и разрабатывать сервисы, обрабатывающие миллиарды событий пользователей.
• Решать сложные инженерные задачи: расчеты метрик, построение витрин.
• Работать с потоками данных и интеграциями между CDP и другими системами 2ГИС.
• Влиять на архитектурные решения и качество кода.
• Работать в распределенной команде, взаимодействуя с аналитиками, продактами и инженерами других направлений.

Ждем от тебя:

• Опыт анализа данных от 3–5 лет с использованием SQL.
• Опыт работы с Apache Spark.
• Опыт работы с Airflow.
• Опыт работы с Python.
• Самостоятельность и проактивность – ты не ждешь постановок, а предлагаешь решения.
• Желание разбираться в бизнес-логике и создавать продукт, а не просто писать код.

Будет плюсом:

• Опыт работы с highload-системами.
• Опыт работы с Kafka, ClickHouse или другими системами потоковой и аналитической обработки данных.
• Опыт проектирования архитектуры данных или платформенного кода.
• Понимание подходов к персонализации, сегментации или real-time аналитике.
• Понимание, как работает S3 хранилище.

Почему это круто:

• Масштаб: миллионы пользователей, миллиарды событий, сотни интеграций.
• Рост: CDP – стратегическое направление, растем быстро и даем расти команде.
• Свобода: минимум бюрократии, максимум ответственности.
• Видимый результат: все, что ты делаешь, влияет на продукт, коммуникации и рекламу 2ГИС.

Почему у нас классно?

• Мы аккредитованная IT — компания.
• У нас можно работать удалённо. Для нас важен специалист, а не его локация. Если хочешь работать в гибридном формате, у нас есть офисы в Москве, Санкт-Петербурге, два классных офиса в Новосибирске. Нет дресс-кода и строгого графика: главное, чтобы было удобно тебе и команде.
• Используем современные технологии и любим о них говорить: выступаем на конференциях и сами их организуем.
• Стараемся регулярно устраивать тимбилдинги, так как считаем, что хорошие отношения — залог продуктивной работы.