Наш блок занимается сегментами клиентов, для лучшего клиентского опыта и финансового результата мы взаимодействуем с каждым сегментом по-особенному. Предстоит работать в большой команде Data-people (>60 человек) с четким разделением ролей. В распоряжении команды 2 мощных Hadoop кластера, а также общие сервера с GPU (Tesla A100/V100/DGX).
Обязанности
- Промышленное внедрение ML моделей с финансовым эффектом > 3 млрд. руб/год, в т.ч NLP SOTA моделей на основе трансформеров и многое другое
- Построение эффективных пайплайнов обработки данных на Apache Spark и конвейеров на Apache Airflow
- Развитие кластеров Лабораторий данных (Hadoop) подразделения (оптимизация, масштабирование, установка доп. инструментов, администрирование)
- Предоставление экспертной поддержки Data-people юнита в части оптимизации запросов, хранения данных и т.д.
- Поддержка сопроводительной ML-документации в базе знаний подразделения.
Требования
- Не менее 3 лет работы в качестве Data Engineer/Data Scientist
- Продвинутые знания SQL и Python: опыт разработки и, желательно, внедрения в пром. от 1 года
- Уверенные знания основных компонентов Apache Hadoop
- Опыт работы с фреймворком Apache Spark
- Понимание основ Machine Learning.
Будет плюсом:
- Знание Scala
- Опыт работы с Python ML-frameworks (Scikit-Learn, LightGBM, PyTorch и другие)
- Опыт работы с Spark streaming, Kafka, Hbase, GreenPlum
- Опыт работы с DevOps (Jenkins), Git (BitBucket)
- Опыт работы по методологии Agile (SCRUM, Kanban).
Условия
- Комфортный современный офис рядом с м. Кутузовская
- Формат работы - офис
- Ежегодный пересмотр зарплаты, годовая премия
- Корпоративный спортзал и зоны отдыха
- Более 400 образовательных программ СберУниверситета для профессионального и карьерного развития
- Расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа
- Гибкий дисконт по ипотечному кредиту, равный 1/3 ключевой ставки ЦБ
- Бесплатная подписка СберПрайм+, скидки на продукты компаний-партнеров
- Вознаграждение за рекомендацию друзей в команду Сбера.