Data Engineer / Дата-инженер

Платформа Больших Данных

Data Engineer / Дата-инженер

Москва, Гончарная улица, 21

Метро: Таганская

Описание вакансии

Основные задачи:
  • Участие в разработке и поддержании высоконагруженного сервиса (python, FastAPI);
  • Разработка и оптимизация ETL пайплайнов с помощью Spark и Airflow по сбору, обработке, хранению и выгрузке данных;
  • Построение витрин данных для аналитических отчетов на HDFS;
  • Организация эффективного хранения логов, настройка мониторинга и алертинга;
  • Подготовка и поддержание актуальной технической документации;
  • Взаимодействие с бизнес-заказчиками, дата-аналитиками и DevOps

Требования:
  • Отличное знание Python;
  • Опыт работы с Hadoop/Spark, понимание принципов работы распределенных вычислений;
  • Знание SQL, понимание принципов работы реляционных БД (Postgres);
  • Знание основ работы с командной строкой и базовых утилит Linux;
  • Опыт работы с git;
  • Опыт работы с Airflow;
  • Понимание и интерес к области больших данных;

Будет плюсом:

  • Опыт backend разработки (FastAPI)
  • Опыт frontend разработки (javascript)
  • Опыт работы с нереляционными БД (Redis)
  • Опыт работы c Kafka
  • Опыт работы с системами мониторинга (Prometheus, Grafana)
  • Опыт работы с высоконагруженными системами
  • Знание http/https, dns и предметной области работы операторов (кликстрим, система сбора логов)
  • Понимание работы рекламных технологий, RTB-аукциона
  • Опыт в DevOps / Тестировании
  • Знание Scala
Что мы предлагаем:
  • интересные рабочие задачи и возможность профессионального развития;
  • классное рабочее место в самом сердце Москвы. Но возможен и гибридный формат работы;
  • ДМС после испытательного срока;
  • нормированный рабочий день с 9 до 18.

Присоединяйся к нам и стань частью команды, которая меняет будущее с помощью данных!

Посмотреть контакты работодателя

Адрес

Похожие вакансии

Grand Line

Data Engineer

Grand Line

Удаленная работа
  • Москва

  • до 250000 RUR

Рекомендуем
Бэнкс Софт Системс

Data Engineer

Бэнкс Софт Системс

Удаленная работа
  • Москва

  • до 250000 RUR

Рекомендуем
Skillbox

Data Engineer

Skillbox

Удаленная работа
  • Москва

  • до 250000 RUR

Рекомендуем
VK
Удаленная работа
  • Москва

  • до 250000 RUR

Flowwow
Удаленная работа
  • Москва

  • от 270000 RUR

Leads
Удаленная работа
  • Москва

  • до 240000 RUR

Бризекс
Удаленная работа
  • Москва

  • до 200000 RUR

ML-инженер (видеохостинг, highload)

NM TEAM SOCIAL MEDIA APPLICATIONS DEVELOPMENT & MANAGEMENT CO. L.L.C

Удаленная работа
  • Москва

  • от 350000 RUR

Концепт Разработка

Разработчик DWH/Data Engineer

Концепт Разработка

Удаленная работа
  • Москва

  • от 350000 RUR

М.Видео-Эльдорадо

Data Scientist (RecSys)

М.Видео-Эльдорадо

Удаленная работа
  • Москва

  • от 350000 RUR

Студия Кефир

Data Engineer (GameDev)

Студия Кефир

Удаленная работа
  • Москва

  • от 350000 RUR

X5 Tech
Удаленная работа
  • Москва

  • от 350000 RUR

Риверстарт
Удаленная работа
  • Москва

  • до 350000 RUR

Скайтек
Удаленная работа
  • Москва

  • до 160000 RUR

Инвиста

Data Engineer (relocate)

Инвиста

Удаленная работа
  • Москва

  • до 6000 USD

Lamoda Tech

ML Engineer (MLOps)

Lamoda Tech

Удаленная работа
  • Москва

  • до 6000 USD

Data Engineer

Кидс Аппс

Удаленная работа
  • Москва

  • до 6000 USD

BroadView Russia

ML-инженер

BroadView Russia

Удаленная работа
  • Москва

  • до 6000 USD

В Кадре

Data Engineer

В Кадре

Удаленная работа
  • Москва

  • до 250000 RUR

AdSensor
Удаленная работа
  • Москва

  • до 250000 RUR

Хотите оставить вакансию?

Заполните форму и найдите сотрудника всего за несколько минут.
Оставить вакансию