Инженер данных

Наш стек: Python, Airflow, ClickHouse, Trino, PostgreSQL, Vertica, Kafka, S3, Spark, Hadoop, Kubernetes, Helm, Superset, Prometheus, Grafana, GitLab, Jira, Confluence.

Вам предстоит

• разрабатывать и поддерживать пайплайны поставки данных в ClickHouse, Vertica и Trino

• проектировать и реализовывать фабрики data-пайплайнов

• обеспечивать своевременное обновление и поступление актуальных данных

• развивать систему Data Governance

• обучать аналитиков современным практикам работы с данными

• настраивать и поддерживать системы мониторинга и алертинга

• автоматизировать процессы разработки и аналитики с использованием AI-агентов и agentic development tools

• создавать AI-workflows для типовых инженерных задач и интегрировать их с внутренними инструментами

• стандартизировать технические процессы, проекты и workflows аналитиков данных

Для нас важно, что вы

• более 2 лет работаете с Python

• более 2 лет работаете Data Engineer: знаете Apache Spark (PySpark), понимаете принципы работы СУБД и умеете оптимизировать запросы

• умеете работать с ClickHouse, PostgreSQL и Trino

• понимаете принципы построения и работы хранилищ данных

• имеете практический опыт использования AI-агентов и agentic development tools (Claude Code / Codex / OpenCode или аналоги) для решения инженерных задач

• понимаете принципы работы с контекстом, инструкциями, tools/skills и многошаговыми agentic workflows

• умеете разрабатывать компоненты Airflow

• поддерживаете порядок в коде, Git и документации

• умеете и любите быстро учиться, применять новые знания на практике и самостоятельно находить ответы на сложные вопросы

• имеете высшее техническое образование

Будет плюсом, если вы

• имеете опыт работы с CI/CD

• умеете работать с Kubernetes, Prometheus, Superset и Helm

• имеете опыт взаимодействия с аналитиками и Data Scientists

• создавали собственных AI-агентов, skills/tools, MCP-интеграции или многошаговые AI-workflows для автоматизации инженерных процессов