Data Engineer

Ключевые задачи:

- проектирование, разработка и поддержка ETL/ELT-процессов
- разработка и оптимизация архитектуры хранилища данных, создание схем загрузки и моделей данных
- автоматизация процессов сбора информации и ее загрузки в базы данных
- анализ собранных данных с последующей очисткой от недостоверной, ошибочной и повторяющейся информации
- подготовка и обработка больших массивов сырых данных для формирования датасетов для аналитики
- построение и поддержка конвейеров данных для их бесперебойной работы
- настройка инфраструктуры для хранения и обработки данных
- участие в настройке окружения и подготовке данных для обучения ML-моделей

Мы ожидаем:

- опыт коммерческой разработки на Python, SQL (Pl/pgSQL)
- опыт работы с реляционными СУБД (PostgreSQL) и колоночными базами данных (ClickHouse)
- опыт проектирования и построения хранилищ данных (DWH)
- практический опыт работы с Apache Airflow для оркестрации процессов
- понимание принципов работы с API и опыт интеграции с ними
-опыт работы с системами контроля версий Git (GitLab/GitHub)
- уверенное владение Linux (на уровне администрирования и написания скриптов, опыт с OL8/9, Ubuntu)
- опыт работы с брокерами сообщений, такими как Kafka или RabbitMQ.

Будет плюсом:

- опыт работы с облачными сервисами
- знание фреймворка Apache Spark для распределенной обработки данных
- опыт работы с BI-инструментами (Tableau, Power BI, Superset) для понимания потребностей конечных пользователей
- базовые знания Docker и основ оркестрации (Kubernetes)
- знание технологий из стека Big Data (опыт с Redis)
- базовое понимание процессов Machine Learning

Мы предлагаем:

Финансовая мотивация и гарантии:
Конкурентная заработная плата
Официальное трудоустройство (ТК РБ), полный соцпакет
28 дней отпуска + матпомощь на оздоровление
Медицинская страховка

Профессиональное развитие:
Работа над инновационными IT-проектами в сильной команде
Оплата курсов, конференций и семинаров

Корпоративная культура:
Современный офис в центре Минска
Качественное оборудование
График работы (пн.–чт. 9:00–18:00, пт. 9:00–16:45)
Корпоративы, подарки сотрудникам на значимые даты
Уютные зоны отдыха с игровыми пространствами