Senior Data Engineer

Спортмастер

Senior Data Engineer

Описание вакансии

Мы находимся в поиске Senior Data Engineer в платформенную команду BI.

Команда занимается развитием корпоративного хранилища данных (DataLake). Исследует и внедряет новые инструменты (RnD), пишет библиотеки для использования другими командами, разрабатывает нестандартные ETL потоки и помогает коллегам в оптимизации сложных потоков.

Ваши задачи:

  • Реализация ETL в Hadoop (с помощью Airflow);
  • Работа с различными источниками данных: Oracle, MS SQL, API личных кабинетов, микросервисы;
  • Батч и стримы с помощью PySpark и Kafka;
  • Подготовка витрин для анализа (Hive + Spark+ SQL).

Мы ждем от будущих коллег:

  • Уверенное владение Python;
  • Опыт использования эко-системы Hadoop: HDFS, Apache AirFlow, Hive, Kafka, Spark;
  • Знание SQL;
  • Опыт работы с реляционными базами данных (Oracle).

Наш стек: Python, Pyspark, Hive/hdfs, Airflow, ClickHouse, Kafka, Tableau.

Посмотреть контакты работодателя

Похожие вакансии

ARK
Удаленная работа
  • Москва

  • Не указана

Рекомендуем
Beresnev Games

Senior Data Engineer

Beresnev Games

Удаленная работа
  • Москва

  • Не указана

Рекомендуем
Skillbox

Data Engineer

Skillbox

Удаленная работа
  • Москва

  • Не указана

Рекомендуем
СП Солюшен

Senior Data Engineer

СП Солюшен

Удаленная работа
  • Москва

  • Не указана

Концепт Разработка

Разработчик DWH/Data Engineer

Концепт Разработка

Удаленная работа
  • Москва

  • Не указана

Дата Дженерейшн

Data Engineer

Дата Дженерейшн

Удаленная работа
  • Москва

  • до 340000 RUR

Flowwow
Удаленная работа
  • Москва

  • от 270000 RUR

Ventra
Удаленная работа
  • Москва

  • от 270000 RUR

Any
Удаленная работа
  • Москва

  • от 270000 RUR

«UZUM TECHNOLOGIES»

Senior OPS Analytics Engineer

«UZUM TECHNOLOGIES»

Удаленная работа
  • Москва

  • от 270000 RUR

Neoflex

Data Engineer

Neoflex

Удаленная работа
  • Москва

  • от 270000 RUR

РСХБ-Интех
Удаленная работа
  • Москва

  • от 270000 RUR

LIAN
Удаленная работа
  • Москва

  • до 327000 RUR

Coleman Group

Senior Data Engineer

Coleman Group

Удаленная работа
  • Москва

  • до 450000 RUR

VK
Удаленная работа
  • Москва

  • до 450000 RUR

Инвиста

Data Engineer (relocate)

Инвиста

Удаленная работа
  • Москва

  • до 6000 USD

ДипХакЛаб

Senior Scala Backend Developer

ДипХакЛаб

Удаленная работа
  • Москва

  • до 550000 RUR

МТС
Удаленная работа
  • Москва

  • до 550000 RUR

Яндекс
Удаленная работа
  • Москва

  • до 550000 RUR

DIS Group
Удаленная работа
  • Москва

  • до 550000 RUR

Хотите оставить вакансию?

Заполните форму и найдите сотрудника всего за несколько минут.
Оставить вакансию