Data engineer (РСХБ-Автоматизация)

Data engineer (РСХБ-Автоматизация)

Москва, Профсоюзная улица, 125А

Метро: Генерала Тюленева

Описание вакансии

Лаборатория искусственного интеллекта занимается внедрением технологий ИИ в бизнес-процессы банка. Мы развиваем свою DataOps платформу (Kubernetes, JupyterHub, AirFlow, Spark и т.д.) под названием RAISA и делаем на ней инструменты и фреймворки как для себя, так и для других дата-специалистов РСХБ.

Обязанности\задачи:

  • Разработка, поддержка и оптимизация инструмента потоковой обработки данных, а также написание пайплайнов по трансформации данных и инференса машинных моделей;
  • Работа с большими данными в распределенной среде;
  • Интеграция и обработка данных из различных источник;
  • Проектирование новых решений.

Требования к кандидату:

Обязательные навыки и знания:

  • Опыт работы с Java ;
  • Опыт построение стриминг пайплайнова (Debezium, Kafka, Flink);
  • Опыт работы с Airflow (разработка dag'ов, сенсоры, кастомные операторы);
  • Опыт с Apache Spark (Pyspark, dataframe api, оптимизация джобов);
  • Знание S3 API, HDFS, основ форматов данных (Parquet, orc, avro) и табличных форматов (Hoodie, Iceberg, Hive);
  • Опыт работы с Python (pandas/polars, sqlAlchemy);
  • Опыт работы с системами контроля версий (Git, Gitlab, ci/cd);
  • Опыт взаимодействия с хранилищами данных и базами данных (Greenplum, PostgreSQL);
  • Системное мышление, опыт дизайна Data-решений;
  • Ответственность, умение вести разработку фич Уверенное знание работы операционных систем Linux.

Необязательные навыки и знания:

  • Опыт работы с нереляционными и графовыми БД;
  • Опыт работы с облачными системами (AWS, Yandex Cloud);
  • Понимание принципов построения RAG и Мультиагентной системы.

Условия:

  • Обучение за счет компании (посещение конференций, курсов, помощь в написании статей на Хабр и т.д.);
  • Вертикальное и горизонтальное развитие: регулярные тренинги, вебинары, митапы;
  • Забота о вашем здоровье: ДМС с первого месяца работы, куда входит стоматология;
  • Прозрачный доход: оклад (по итогам интервью) + ежеквартальные премии по результатам KPI;
  • Гибкий график или полная удаленка (по итогам общения с командой);
  • Комфортные и современные офисы в городах присутствия (Москва, Санкт-Петербург, Уфа, Брянск, Новосибирск и др.);
  • Дополнительные бонусы от Россельхозбанка для сотрудников группы компаний (Скидки на спортзалы, рестораны, маркетплейсы и т.д.).
Навыки
  • Java
  • Debezium
  • Kafka
  • Flink
  • Airflow
  • Apache Spark
  • S3 API
  • HDFS
  • Python
  • Greenplum
  • PostgreSQL
  • Linux
Посмотреть контакты работодателя

Адрес

Похожие вакансии

RedLab
  • Москва

  • Не указана

Рекомендуем
IBS
  • Москва

  • Не указана

Рекомендуем
X5 Tech
  • Москва

  • Не указана

Рекомендуем
Amex Development
  • Москва

  • Не указана

Островок

Middle+ DWH Engineer

Островок

  • Москва

  • Не указана

СИНЕРГИЯ
  • Москва

  • до 200000 RUR

RedLab
  • Москва

  • до 200000 RUR

Островок
  • Москва

  • до 200000 RUR

Фаззи Лоджик Лабс
  • Москва

  • до 200000 RUR

Data Engineer

Genesis Group AG

  • Москва

  • до 200000 RUR

Альфа-Банк
  • Москва

  • до 200000 RUR

evrone.ru
  • Москва

  • до 200000 RUR

Оператор Газпром ИД

Senior Machine Learning Engineer / RecSys

Оператор Газпром ИД

  • Москва

  • до 200000 RUR

Флаувау

Senior Data Engineer

Флаувау

  • Москва

  • до 200000 RUR

Orion soft
  • Москва

  • до 200000 RUR

Альфа-Селлер Технологии

Data Engineer

Альфа-Селлер Технологии

  • Москва

  • до 200000 RUR

RWB (Wildberries & Russ)
  • Москва

  • до 200000 RUR

ПКО Вернём

Junior Data Scientist

ПКО Вернём

  • Москва

  • до 200000 RUR

Хотите оставить вакансию?

Заполните форму и найдите сотрудника всего за несколько минут.
Оставить вакансию