Data Engineer

IT-подразделение крупной и известной консалтинговой фирмы в Казахстане - CSI приглашает к сотрудничеству на проект еАкимат 365. Мы развиваем продуктовую платформу для государственного сектора и ищем Data engineer, который построит и будет развивать data layer платформы-основу аналитики, отчётности и интеграций.

Мы реализуем значимый GovTech проект: моделируем показатели социально-экономического развития регионов и автоматизируем их бизнес-процессы. Став частью нашей команды, Вы сможете принести пользу регионам с населением более двух миллионов казахстанцев.

Обязанности:

Какие обязанности будет выполнять сотрудник:

• Построение и развитие семантической модели данных на DBT: staging, intermediate, marts;
• Разработка и сопровождение пайплайнов на Airflow: загрузка из операционной БД, внешних источников, обработка ручного ввода;
• Интеграция данных из разнородных внешних систем;
• Оптимизация запросов и моделей под рост объёма данных;
• Тесты качества данных (DBT tests), мониторинг расхождений и целостности
  интеграций;
• Автоматизированная документация моделей данных;
• Использование современных ИИ-инструментов в работе с DBT-моделями и
  пайплайнами.

• Высшее (желательно техническое: IT, мат. моделирование).

• Опыт работы Data Engineering от 3-х лет на продуктовых или enterprise-системах;

• Опыт работы с Airflow и реляционными базами данных.

• PostgreSQL и продвинутый SQL;

• Опыт интеграции данных из разнородных источников;

• Опыт работы с ИИ- инструментами разработки Claude Code и/или аналоги.

• Требования к профессиональным знаниям (программы, языки): Python (Middle),

• SQL (Advanced),

• Docker, Git.

• Английский на уровне чтения технической документации.

  Какие компетенции являются критичными?:

• Уверенное владение Python (pandas, requests, asyncio).
• Опыт работы с Apache Airflow (написание DAGs).
• Глубокое понимание SQL и работы PostgreSQL.
• Умение работать с API (понимание JSON, методов HTTP, авторизации).Какие компетенции будут преимуществом:

• Опыт работы с государственным данными;

• Опыт построения семантических слоёв на крупных DWH;

• Знание казахского языка.

• график работы 5/2,
• конкурентная заработная плата,
• корпоративная медицинская страховка,
• возможности для профессионального роста,
• доброжелательная и поддерживающая команда молодых специалистов,
• офис на левом берегу в современном деловом стиле,
• возможность влиять на развитие продукта и улучшение процессов клиентов.