Data Engineer (middle or senior)

Data Engineer (middle or senior)

Описание вакансии

Разработка и развитие высоко-нагруженной Data платформы.

Состав задач:

- Разработка ETL-процессов на базе прототипов и технических требований;

- Изменение существующих ETL-процессов, согласно меняющимся бизнес-требованиям;

- Продуктивизация кода, DQ-проверок, постановка на регламент, контроль работы ETL-процессов;

- Оптимизация и рефакторинг кода на уровне запросов и конфигураций (SQL/Python/Spark/HDFS);

- Взаимодействие с Системными аналитиками, Инженерами данных, Второй линией поддержки, DevOps, другими смежными подразделениями;

- Оперативное решение инцидентов на уровне третьей линии поддержки;

- Работа с Централизованным OLAP-хранилищем (Hadoop) и слоем репликации витрин данных (Greenplum). Также возможна работа с PostgreSQL, Teradata, Clickhouse и другими БД.

Технический стек: SQL, Python, Hadoop, HDFS, HIVE, Spark, Airflow, Linux CLI, Greenplum или другая MPP-Database, YAML-нотация

Навыки
  • Python
  • SQL
  • Hadoop
  • HDFS
  • HIVE
  • Spark
  • Airflow
  • Greenplum
  • MPP-Database
  • YAML
  • PostgreSQL
  • Clickhouse
  • Teradata
Посмотреть контакты работодателя

Похожие вакансии

Открытые решения

Python Developer Senior (AI Agents)

Открытые решения

Удаленная работа
  • Казань

  • Не указана

Рекомендуем
Брайт Эйдженси

Head of Data Technology

Брайт Эйдженси

Удаленная работа
  • Казань

  • Не указана

Рекомендуем
Т1
Удаленная работа
  • Казань

  • Не указана

Рекомендуем
ICL Системные технологии
Удаленная работа
  • Казань

  • Не указана

ГЕТ ЭКСПЕРТС РЕКРУТМЕНТ

Сетевой инженер WAN/LAN

ГЕТ ЭКСПЕРТС РЕКРУТМЕНТ

Удаленная работа
  • Казань

  • до 280000 RUR

Directum
Удаленная работа
  • Казань

  • до 280000 RUR

Модульные котельные системы
Удаленная работа
  • Казань

  • до 180000 RUR

Арсан
Удаленная работа
  • Казань

  • до 180000 RUR

ICL Системные технологии
Удаленная работа
  • Казань

  • до 180000 RUR

ГК Innostage
Удаленная работа
  • Казань

  • до 180000 RUR

Инженер ПТО

Рн-Групп

Удаленная работа
  • Казань

  • до 100000 RUR

Компания Пачоли

Ведущий аудитор

Компания Пачоли

Удаленная работа
  • Казань

  • до 100000 RUR

Монополия
Удаленная работа
  • Казань

  • до 100000 RUR

Т1
Удаленная работа
  • Казань

  • до 100000 RUR

IBS
Удаленная работа
  • Казань

  • до 100000 RUR

Линсофтверпродакшн

Senior системный аналитик

Линсофтверпродакшн

Удаленная работа
  • Казань

  • до 300000 RUR

Содружество, Группа компаний
Удаленная работа
  • Казань

  • до 300000 RUR

Level Group
Удаленная работа
  • Казань

  • до 300000 RUR

Хотите оставить вакансию?

Заполните форму и найдите сотрудника всего за несколько минут.
Оставить вакансию