Data Engineer

Команда проекта занимается разработкой интеллектуальной системы анализа данных для B2B-сегмента. Проект включает построение data-платформы для консолидации данных из ERP, CRM, биллингов и лог-шин с последующей интеграцией с ML/LLM-моделями
Сейчас мы ищем коллегу на роль Data Engineer для работы в опытной команде. Присоединяйся к нам и включайся в процесс разработки системы для телеком проекта!

Твои задачи:

• Подключаться к источникам бизнеса (ERP/CRM/биллинги/лог-шины/API), консолидировать разрозненные данные
• Строить и поддерживать надёжные конвейеры (батч/стриминг) с оркестрацией, мониторингом и алертингом
• Готовить датасеты и фичи: схемы, слои, форматы, версионирование
• Обеспечивать хранение данных: проектировать DWH/даталейк/лейкхаус, индексацию, партиционирование, компрессию
• Настраивать data quality/контракты данных, валидации, тесты, SLA
• Оптимизировать стоимость и производительность: планирование ресурсов, профилирование, кэш/материализация
• Интегрировать ML/LLM-пайплайны: оффлайн/онлайн фичи, фичастор, подготовка корпусов для RAG, векторные БД

Мы ждем от тебя:

• Опыт работы от 3х лет в data-инженерии: проектирование и эксплуатация конвейеров данных (батч/стриминг)
• Навыки работы с SQL (оконные функции, оптимизация) и Python для пайплайнов/утилит
• Опыт работы с Airflow (DAG, зависимости, сенсоры, SLA, retries
• Навыки проектирования слоёв данных и форматов
• Понимание ML-пайплайнов на уровне подготовки признаков/датасетов для обучения и сервинга

Что мы обеспечим:

• Работа в гибкой методологии разработки
• Возможность расширить свою экспертизу, используя современный стек технологий
• Сессия профессионального развития персонала дважды в год, результатом которой является план индивидуального развития каждого сотрудника
• Поездки на конференции и тренинги за счет компании, внутренние семинары, внутренние митапы, мы очень любим учиться новому
• Сообщества по интересам: Лига Спорта, Лига Интеллекта, а также возможность организовать свое сообщество и получить поддержку от компании
• Корпоративная культура со своими ценностями и традициями, в которой каждый человек чувствует себя частью команды
• Новая техника для комфортной работы