Senior Data Engineer

Спортмастер

Senior Data Engineer

Описание вакансии

Мы находимся в поиске Senior Data Engineer в платформенную команду BI.

Команда занимается развитием корпоративного хранилища данных (DataLake). Исследует и внедряет новые инструменты (RnD), пишет библиотеки для использования другими командами, разрабатывает нестандартные ETL потоки и помогает коллегам в оптимизации сложных потоков.

Ваши задачи:

  • Реализация ETL в Hadoop (с помощью Airflow);
  • Работа с различными источниками данных: Oracle, MS SQL, API личных кабинетов, микросервисы;
  • Батч и стримы с помощью PySpark и Kafka;
  • Подготовка витрин для анализа (Hive + Spark+ SQL).

Мы ждем от будущих коллег:

  • Уверенное владение Python;
  • Опыт использования эко-системы Hadoop: HDFS, Apache AirFlow, Hive, Kafka, Spark;
  • Знание SQL;
  • Опыт работы с реляционными базами данных (Oracle).

Наш стек: Python, Pyspark, Hive/hdfs, Airflow, ClickHouse, Kafka, Tableau.

Посмотреть контакты работодателя

Похожие вакансии

Lamoda Tech
Удаленная работа
  • Москва

  • Не указана

Рекомендуем
Кситест
Удаленная работа
  • Москва

  • Не указана

Рекомендуем
СП Солюшен

Senior Data Engineer

СП Солюшен

Удаленная работа
  • Москва

  • Не указана

Рекомендуем
ARK
Удаленная работа
  • Москва

  • до 450000 RUR

Beresnev Games

Senior Data Engineer

Beresnev Games

Удаленная работа
  • Москва

  • до 450000 RUR

Marfatech
Удаленная работа
  • Москва

  • до 450000 RUR

Диплей

Data Engineer [Senior]

Диплей

Удаленная работа
  • Москва

  • до 450000 RUR

GRI
Удаленная работа
  • Москва

  • до 450000 RUR

РТК-ЦОД

Senior Data Engineer

РТК-ЦОД

Удаленная работа
  • Москва

  • до 450000 RUR

RDP.RU
Удаленная работа
  • Москва

  • до 450000 RUR

Spice IT

DWH Lead

Spice IT

Удаленная работа
  • Москва

  • до 450000 RUR

Skillbox

Data Engineer

Skillbox

Удаленная работа
  • Москва

  • до 450000 RUR

SkillStaff
Удаленная работа
  • Москва

  • до 450000 RUR

Газпромбанк

Data Engineer

Газпромбанк

Удаленная работа
  • Москва

  • до 450000 RUR

Effective
Удаленная работа
  • Москва

  • до 400000 RUR

Концепт Разработка

Разработчик DWH/Data Engineer (Python, DBT)

Концепт Разработка

Удаленная работа
  • Москва

  • до 400000 RUR

ROSSKO

Data Engineer

ROSSKO

Удаленная работа
  • Москва

  • от 260000 RUR

Дата Дженерейшн

Data Engineer

Дата Дженерейшн

Удаленная работа
  • Москва

  • до 340000 RUR

ArtVolkov.ru
Удаленная работа
  • Москва

  • до 850000 RUR

Flowwow
Удаленная работа
  • Москва

  • от 270000 RUR

Хотите оставить вакансию?

Заполните форму и найдите сотрудника всего за несколько минут.
Оставить вакансию