DataOps Engineer

Bilim Group - это продуктовая EdTech-компания в Казахстане. Мы работаем с огромным масштабом изменений - со всей системой образования страны.

Сейчас мы активно развиваем Data Platform - инфраструктуру для аналитики и обработки данных, которая помогает принимать продуктовые решения и улучшать образовательный опыт пользователей. Наша аналитическая платформа уже содержит более 3 TB данных и продолжает быстро расти. Мы строим современную data-архитектуру с потоковой обработкой данных, CDC-пайплайнами и масштабируемыми хранилищами.

Ищем Data Platform / DataOps инженера, который поможет развивать и масштабировать эту инфраструктуру.

Чем предстоит заниматься:

• Развертывать и поддерживать инфраструктуру Data Platform
• Поддерживать и масштабировать MPP-хранилища данных
• Настраивать и администрировать серверы баз данных (конфигурация, производительность, отказоустойчивость)
• Разворачивать и сопровождать streaming-стек (Kafka, Debezium, Flink)
• Настраивать Kubernetes-инфраструктуру для data-сервисов
• Развивать CI/CD и GitOps процессы (ArgoCD, GitLab CI)
• Настраивать мониторинг и observability платформы (Prometheus, Grafana, Loki)
• Повышать отказоустойчивость и производительность системы
• Управлять доступами, secrets и backup/restore стратегиями
• Поддерживать orchestration-сервисы (Airflow)
• Участвовать в расследовании инцидентов и улучшении reliability платформы
• Взаимодействовать с командами Data Engineering и DevOps

Наш технологический стек:

• Kubernetes + Helm

• Kafka / Debezium / Flink

• Airflow

• Postgres / Mysql

• ClickHouse / Vertica / Greenplum

• Prometheus / Grafana / Loki

• ArgoCD / GitLab CI

• Yandex Cloud / AWS

Что мы ожидаем:

• Опыт работы с Kubernetes (production-кластеры)

• Опыт эксплуатации Kafka

• Опыт администрирования MPP-хранилищ (ClickHouse / Vertica / Greenplum)

• Понимание принципов CDC и потоковой обработки данных

• Опыт настройки CI/CD и GitOps

• Опыт работы с системами мониторинга (Prometheus, Grafana)

• Понимание распределённых систем и highload-инфраструктуры

• Опыт работы с облаками (Yandex Cloud или AWS)

Будет плюсом:

• Опыт работы с Terraform, Ansible

• Опыт эксплуатации Flink

• Опыт построения Data Platform

• Опыт внедрения MLOps практик (Kubeflow, MLflow)

Что мы предлагаем:

• участие в развитии современной Data Platform

• работу с потоковой обработкой и highload-инфраструктурой

• возможность влиять на архитектуру платформы

• команду data-инженеров и инженеров платформы

• реальные инженерные задачи, а не только поддержку

Что ты получаешь, присоединившись к нам:

• Достойная зарплата - обсудим на встрече, индивидуально и честно.

• Тёплая и поддерживающая команда - ценим уважение, открытость и чувство юмора.

• Прокачка знаний - доступ к курсам Kitap.kz, Bilimland.com, Lerna.kz и другим образовательным платформам.

• Языки - легко: изучай иностранные на Qlang.kz в удобном тебе ритме.

• Кафетерий бенефитов - спорт, здоровье, обучение. Ты сам выбираешь, что важно (доступ через полгода).

• Ивенты, квизы, meet-up’ы и Тәтті күн - традиция вкусных угощений и веселых встреч.

• BYOD - если работаешь со своим ноутбуком, мы это компенсируем.

Как мы работаем:

• В офисе в Астане (Expo, Мангилик ел 55/13) или Алматы (БЦ Алатау Гранд, Тимирязева 28В).

• Возможен удаленный формат — обсудим на старте.

• График: пн–пт, с 9:00 до 18:00.

• Официальный найм с первого дня, испытательный срок — 3 месяца.