Senior data engineer

ИТ B2C — самая крупная экосистема в Сбере. Нас более 8000 человек в 18 городах России. Мы занимаемся разработкой и развитием розничных решений, помогая сделать сервисы Банка доступнее, безопаснее и удобнее. Ждем именно тебя!

Мы создаем рекламную платформу на передовом стеке технологий.

Размещение рекламы в интернете – это запросы для:

• рекламодателя для увеличения прибыли или узнаваемости продаваемого продукта
• сайтов, размещающих рекламу для получения прибыли от продажи места на сайте
• пользователя для получения полезной неназойливой рекламы

Одним из ключевых условий для успешного решения этих задач является идентификация пользователей, позволяющая собирать профиль пользователя, для показа ему наиболее релевантной и интересной рекламы.

Обязанности

• создавать новый пайплайны по обработке данных (и развивать уже существующие);
• проводить оптимизацию и тестирование пайплайнов
• быть лидером поставки сервиса, отвечать за техническую целостность продукта и его работу в production
• разработка и поддержка мониторингов качества ключевых метрик идентификации
• решение ad-hoc задач по аналитике качества идентификаторов и георазметки

Требования

• опыт промышленной разработки на стеке Java/Scala/Python и хорошее понимание принципов одного из этих языков;
• опыт работы c airflow\oozie
• практический опыт разработки приложений с использованием инструментов из big data стека: Spark Structured Streaming, Spark, Kafka, Hive, Impala, Hue, Hbase etc;
• умение проектировать и создавать сложные системы по обработке больших данных;
• хорошие знания SQL, опыт работы с одной из реляционной БД - PostgreSQL/MySQL/MS SQL Server/Oracle;
• понимание подходов к организации разработки (CI/CD, DevOps).

Будет плюсом:

• Опыт работы в рекламе
• Опыт построения и интерпретации моделей классического ML (классификация, регрессия, кластеризация)

Условия

• гибридный формат работы
• годовой бонус и ежегодный пересмотр
• расширенный ДМС с первого дня + стоматология и льготное страхование для семьи
• корпоративный университет Сбера, внутренняя образовательная платформа, участие в IT-конференциях
• 90 дней удаленной работы из любого региона РФ
• гибкий дисконт по ипотечному кредиту, равный 1/3 ключевой ставки ЦБ, корпоративная пенсионная программа, подписка СберПрайм+, скидки от партнеров и сервисов группы компаний.