Data Engineer

О нас:
HuntIT - это передовое рекрутинговое агентство, которое специализируется на поиске и подборе высококвалифицированных специалистов в сфере IT и Digital, сотрудничает с ведущими IT-компаниями, рекламными агентствами и работает над крупными проектами.

О компании-заказчике:
01.tech – IT-компания, создающая передовые веб-платформы, оказывающие влияние на мировую индустрию!

Основная цель – создание высоконагруженных систем, ежедневно обрабатывающих десятки тысяч запросов в секунду, терабайты данных и поддерживающие более 100 миллионов пользователей по всему миру.

В связи с активным расширением 01.tech мы находимся в поисках Data Engineer.

Твои задачи и зона ответственности:

• Разработка внутреннего хранилища данных.
• Разработка и поддержка ETL процессов обработки данных.
• Написание и поддержка DAG в Apache Airflow по подготовке, предобработке и загрузке данных.
• Работа над созданием Feature Store.
• Совместно с MLOps инженерами настройка и ведение мониторинга для отслеживания качества работы ETL пейплайнов.
• Разработка процессов контроля качества данных
• Взаимодействие с ML ресерчерами, ML инженерами и MLOps инженерами.

Для команды важно:

• Опыт разработке ETL пейплайнов.
• Опыт работы c Apache Airflow.
• Понимание принципов различных подходов к хранению и обработке данных: DWH, LakeHouse.
• Знание SQL.
• Знание Python.
• Знание Spark (pyspark), pandas, polars.

Будет плюсом:

• Опыт построения Feature Store.
• Опыт работы с AWS и Kubernetes.
• Опыт работы с Apache Kafka.

• Опыт работы с Delta Lake, Apache Iceberg

Для тебя:

• Работу над множеством проектов с разными требованиями к деплою.

• Полностью оборудованное рабочее место.

• Офис в бизнес-центре класса «А» в Белграде или Лимассоле.

• Гибкое начало рабочего дня (с 9 до 12), возможен гибридный формат.

• ДМС со стоматологией после испытательного срока.

• Частичная компенсация занятий в фитнес-зале и английского языка.

• Корпоративная библиотека.

• Корпоративы с выездами на природу и призами, тимбилдинги, мастер-классы и т.д.

• Полный релокационный пакет в Сербию или на Кипр.