Data Engineer

Международная продуктовая IT-компания, занимаемся разработкой и поддержкой высоконагруженных проектов для крупных компаний, основная часть которых представляет собой B2B решения развлекательной, игровой и спортивной тематики находится в поиске Data Engineer.

Чем предстоит заниматься:

• Разрабатывать и поддерживать ETL/ELT пайплайны в Data Lakehouse архитектуре с Iceberg;
• Разрабатывать витрины в ClickHouse;
• Разрабатывать потоки данных из различных источников через Kafka и обработкой в Spark;
• Настраивать и внедрять DataQuality проверки;
• Работать с CDC и Debezium.

Ожидания:

• Опыт работы с Data Lakehouse архитектурой (предпочтительно с Iceberg);
• Глубокое знание Python и SQL, опыт оптимизации запросов;
• Опыт работы с инструментами оркестрации (Airflow);
• Знание Big Data инструментов (Spark, Kafka, Trino);
• Понимание Data Quality и Data Governance процессов;
• 5+ лет опыта работы на позиции Data Engineer;
• Реализация интеграции с реляционными и NoSQL базами;
• Знание инструментов CDC (Debezium, Kafka Connect).

Наш стек:
Data LakeHouse архитектура, Kafka, Spark, Airflow, ClickHouse, S3, SuperSet, OpenMetadata
Таск-трекеры: Jira
Документация: Confluence

Будет плюсом:

• Опыт работы с BI инструментами (Power BI, Qlik, Metabase, Superset);
• Опыт работы с MongoD;
• Понимание DevOps: Docker, Kubernetes.

Что компания может предложить:

• Возможность развивать свои компетенции и применять знания на практике;
• Возможность поработать на крупных проектах;
• Компания заинтересована в развитии своих сотрудников: готовы привлекать наставников и оплачивать курсы для повышения квалификации;
• Отсутствие бюрократии, быстрое согласование необходимых вещей;
• Оплачиваемые лист нетрудоспособности (больничный лист) и отпускные;
• ДМС после 6 месяцев работы;
• Частичная компенсация английского языка или психолога (на выбор);
• Компенсация спортзала;
• 4 day-off в год за счет компании;
• Компания поддерживает сотрудника в важные периоды жизни;
• Новогодняя премия до 1-го оклада;
• Молодой коллектив, средний возраст в компании - 27 лет;
• Большая высококвалифицированная команда, к которой всегда можно обратиться за помощью.