Data Engineer

Описание вакансии

Обязанности:

​​​​​— Разрабатывать и поддерживать хранилище данных на базе ClickHouse;
— Строить и оптимизировать ETL-процессы;
— Писать, оптимизировать и профилировать SQL/NoSQL-запросы;
— Рассчитывать сложные аналитические показатели в витринах данных;
— Настраивать ClickHouse (шардирование, репликация) и интеграцию с Kafka (прием сырых данных, работа с очередностью сообщений, валидация);
— Участвовать в тестировании потоков данных для обеспечения стабильной работы;
— Писать backend-сервисы на Java;
— Участвовать в разработке архитектуры, процессов и инструментов для работы с данными;
— Контролировать качество данных: мониторинг, анализ и устранение проблем.

Требования:

​​​​​​​​​​​​​​— Опыт работы более 5 лет в данной сфере

  • Глубокое знание SQL, умение работать с планами запросов, знание Python
  • Опыт работы с ClickHouse (администрирование, настройка, оптимизация);

— Опыт работы с брокерами сообщений (Kafka);
— Опыт работы с Kubernetes будет плюсом.
— Опыт Java-разработки (backend);
— Практический опыт участия в проектах по созданию DWH / Data Lake;
— Опыт построения и развития высоконагруженных систем.

Cтек: ClickHouse, Python, SQL, AirFlow, Spark, Apache Kafka, Yandex Cloud, Big Data, Kubernetes, FastAPI / Flask, Java.

Условия:

​​​​​​​​​​​​​​— ИТ аккредитация, официальное оформление по ТК РФ, полностью «белая» зарплата;
— Удаленный формат работы;
— ДМС (через 3 месяца) + стоматология (через год);
— Оплата курсов и конференций;
— Карьерный рост внутри компании;
— Премия за приведенного друга;
— Наставник на первые 3 месяца;

Навыки
  • Python
  • Математическая статистика
  • Apache Kafka
  • Clickhouse
Посмотреть контакты работодателя

Похожие вакансии

Интеграция Дистрибуция Проекты

Data Engineer

Интеграция Дистрибуция Проекты

  • Москва

  • Не указана

Рекомендуем
ИЦ АЙ-ТЕКО

Data Engineer

ИЦ АЙ-ТЕКО

  • Москва

  • Не указана

Рекомендуем
Aston
  • Москва

  • Не указана

Рекомендуем
Флаувау

Senior Data Engineer

Флаувау

  • Москва

  • Не указана

Selecty
  • Москва

  • до 408000 RUR

RWB (Wildberries & Russ)

Data Engineer (Лояльность)

RWB (Wildberries & Russ)

  • Москва

  • до 408000 RUR

Лаборатория Касперского

DevOps Engineer (IDP)

Лаборатория Касперского

  • Москва

  • до 408000 RUR

Spice IT
  • Москва

  • до 408000 RUR

  • Москва

  • до 408000 RUR

Группа НЛМК

Data Engineer

Группа НЛМК

  • Москва

  • до 408000 RUR

Черкизово, Группа предприятий

DevOps-инженер

Черкизово, Группа предприятий

  • Москва

  • до 408000 RUR

Postgres Professional
  • Москва

  • до 408000 RUR

Rubius

Data Engineer

Rubius

  • Москва

  • до 408000 RUR

Домклик
  • Москва

  • до 408000 RUR

Иви
  • Москва

  • до 408000 RUR

ИЦ АЙ-ТЕКО

Data Engineer

ИЦ АЙ-ТЕКО

  • Москва

  • до 230000 RUR

ИЦ АЙ-ТЕКО
  • Москва

  • до 230000 RUR

Хотите оставить вакансию?

Заполните форму и найдите сотрудника всего за несколько минут.
Оставить вакансию