Разработчик ETL (scala)

СБЕР

Разработчик ETL (scala)

Описание вакансии

Команда «Гео и графы» кластера «AI360» корпоративного блока Сбербанка. Команда функционирует в московском офисе и в Санкт-Петербурге. Команда развивает несколько направлений: витрины данных о связанности ЮЛ, клиентские данные ЮЛ, транзакционные витрины данных, графы связей ЮЛ, геовитрины по данным ЮЛ. Все витрины используются для построения моделей в различных бизнес-блоках Банка.

Обязанности

  • участие в сложных интеграционных проектах в роли разработчика
  • разработка, проектирование, тестирование потоков данных, алгоритмов и обработки данных в Hadoop/GreenPlum на Scala/Spark/SQL
  • участие во внедрении моделей на основе ML алгоритмов
  • оптимизация и настройка производительности ETL-процессов
  • участие в разработке фреймворка на Scala.

Требования

  • наличие практического опыта работы с Hadoop (Hive, Impala, sqoop, oozie, HDFS, YARN) или GreenPlum, понимание парадигмы map-reduce и алгоритмов работы Spark
  • опыт работы с реляционными СУБД (Oracle, MS/SQL), навыки оптимизации запросов
  • опыт программирования на Scala/Java/Python
  • фундаментальные знания принципов построения распределенных систем хранения и обработки данных
  • знание Spark.

Будет плюсом:

  • опыт работы с ETL-инструментами (Informatica BDM, ODI, Pentaho) и BI-средствами
  • опыт работы с REST API
  • опыт работы с CI/CD
  • опыт работы с NoSQL базами данных (HBase, Cassandra)
  • опыт работы с Unix shell
  • знания предметной области «Банки и финансы».

Условия

Что мы предлагаем:

• удобный офис в СПб на ул. Уральской, дом 1 (с бесплатной развозкой от метро)

• возможность работать частично удалённо после согласования с руководителем

• регулярный пересмотр заработной платы и возможность получения годовой премии

• уютный корпоративный спортзал и пространства для отдыха

• доступ к более чем 400 образовательным программам СберУниверситета

• программу адаптации и поддержку наставника на первых этапах работы

• расширенную медицинскую страховку (ДМС) и выгодные условия страхования для членов семьи

• ипотечные программы для сотрудников

• бесплатные подписки СберПрайм+ и бонусы партнёров

• вознаграждения за рекомендации кандидатов.

Посмотреть контакты работодателя

Похожие вакансии

IBS
  • Санкт-Петербург

  • Не указана

Рекомендуем
Финансово-правовой альянс

Python-разработчик

Финансово-правовой альянс

  • Санкт-Петербург

  • от 200000 RUR

Рекомендуем
Геоскан
  • Санкт-Петербург

  • от 200000 RUR

Рекомендуем
Нанософт
  • Санкт-Петербург

  • от 200000 RUR

Бизнес Технологии

Junior-разработчик

Бизнес Технологии

  • Санкт-Петербург

  • до 70000 RUR

ITRestoran(ООО Титул)

Python-разработчик

ITRestoran(ООО Титул)

  • Санкт-Петербург

  • до 110000 RUR

Красное & Белое, розничная сеть

Разработчик MS SSAS (Microsoft SQL Server Analysis Services)

Красное & Белое, розничная сеть

  • Санкт-Петербург

  • от 150000 RUR

Яндекс
  • Санкт-Петербург

  • от 150000 RUR

СПб ГКУ ССПК

Программист Python

СПб ГКУ ССПК

  • Санкт-Петербург

  • от 120000 RUR

Электронные системы

Ведущий разработчик Kotlin/Java

Электронные системы

  • Санкт-Петербург

  • от 120000 RUR

АИРТ
  • Санкт-Петербург

  • от 120000 RUR

ЭНТЕР Констракшн

Fullstack-разработчик

ЭНТЕР Констракшн

  • Санкт-Петербург

  • до 250000 RUR

АДР
  • Санкт-Петербург

  • до 250000 RUR

ГК Тихие Крылья

Ведущий разработчик C++

ГК Тихие Крылья

  • Санкт-Петербург

  • до 250000 RUR

СКСР Холдинг
  • Санкт-Петербург

  • до 250000 RUR

Инновационные технологии

ML/MLOps разработчик-стажёр

Инновационные технологии

  • Санкт-Петербург

  • до 250000 RUR

Вологодское зодчество

Разработчик Python (FastAPI)

Вологодское зодчество

  • Санкт-Петербург

  • до 250000 RUR

КБС
  • Санкт-Петербург

  • до 250000 RUR

Хотите оставить вакансию?

Заполните форму и найдите сотрудника всего за несколько минут.
Оставить вакансию