Data Engineer

Обязанности:

• проектирование, разработка и оптимизация ETL/ELT-процессов для сбора, обработки и загрузки больших объемов данных;
• работа с хранилищами данных (Data Warehouse) и озёрами данных (Data Lake) — построение и поддержка архитектуры данных;
• интеграция данных из различных источников (API, базы данных, файлы, стриминговые системы);
• оптимизация производительности запросов, обеспечение качества, целостности и безопасности данных;
• настройка CI/CD-процессов для пайплайнов данных;
• взаимодействие с Data Scientists, аналитиками и разработчиками для обеспечения доступности данных;
• разработка и поддержка документации по архитектуре и процессам данных;
• участие в проектировании архитектуры корпоративных данных, выбор технологий и инструментов.

Требования:

• опыт работы от 3–5 лет в роли Data Engineer, ETL Developer или аналогичной;

• глубокие знания SQL, включая оптимизацию сложных запросов;
• опыт работы с современными системами хранения данных: PostgreSQL, MS SQL;
• опыт проектирования OLAP/OLTP систем;
• опыт разработки и автоматизации ETL/ELT-процессов;
• инструменты: Airflow, Prefect, Luigi или аналогичные;
• языки: Kotlin, Java;
• знание принципов работы с большими данными (Big Data);
• технологии: Spark, Hadoop, Kafka, Flink;
• опыт работы с облачными платформами: AWS (Glue, Redshift, S3), Azure (Data Factory, Synapse), GCP (BigQuery, Dataflow) или QazCloud / отечественные аналоги;
• знание DevOps-практик: контейнеризация (Docker), оркестрация (Kubernetes), CI/CD;
• понимание принципов Data Governance, Data Quality, Security;
• опыт работы с системами контроля версий (Git).

Условия:

• обучение и развитие: курсы и повышение квалификации по программе Tech Orda;
• лечебное пособие: 2 оклада к ежегодному отпуску — для отдыха и оздоровления;
• материальная помощь: поддержка при рождении ребёнка, свадьбе, лечении или других важных событиях;
• современный офис: уютное рабочее место в IT-центре на ЭКСПО — в самом сердце столицы;
• развозка: утренние и вечерние автобусы по всем районам города — без лишних затрат и ожиданий;
• аванс: выплата аванса в середине месяца — стабильность и удобство в планировании бюджета;
• премии: по праздникам и итогам года — за отличную работу и вклад в проекты;
• жильё: очень редко, но возможно предоставление жилья от компании при необходимости;
• карьерный рост: возможность повышения заработной платы через год и продвижения по должности при успешной работе;
• корпоративная жизнь: интересные события и мероприятия для команды;
• крупные проекты: участие в государственных и международных IT-проектах;
• современные технологии: возможность работать с новыми решениями и учиться у лучших IT-специалистов.

Уже не терпится стать частью команды?
Оставь отклик — и мы обязательно рассмотрим твоё резюме!