Data Engineer (Операционные риски)

Мы — амбициозная команда, которая занимается развитием BI-отчетности, автоматизацией процессов регистрации инцидентов операционного риска и подготовкой данных для ML моделей. Мы создаём инновационные продукты, которые повышают эффективность и прозрачность бизнеса.

Используемые технологии и инструменты:

• основные технологии: Airflow, PostgreSQL, Kafka, Superset, Hadoop, Spark
• языки программирования и инструменты: Python, Spark, SQL
• системы управления кодом и CI/CD: BitBucket (Git), Jenkins
• управление задачами и документацией: Jira, Confluence
• работа по методологии Agile.

Чем предстоит заниматься:

• проектирование архитектуры и модели витрин данных
• разработка и оптимизация ETL-процессов для загрузки и обработки данных в DWH
• создание процессов мониторинга, проверок качества данных и автотестов разработанного функционала
• ведение технической документации по потокам данных.

Какие навыки и опыт ожидаем от тебя:

• опыт разработки автоматизированных ETL-потоков (желательно в Airflow и/или Hadoop (Spark)) или схожего функционала от 1 года
• продвинутый уровень владения Python и SQL
• понимание принципов работы баз данных, обработки больших данных и концепций непрерывной интеграции и доставки (CI/CD)
• высшее образование и широкий технический кругозор
• проактивность и ответственность за конечный результат
• английский язык на уровне чтения документации
• опыт использования GigaChat, Kandinsky и аналогов в продуктах, навыки создания и использования AI-агентов
• инструментальное владение AI для анализа, генерации и автоматизации.

Будет преимуществом:

• навыки работы с Flink, знание Java
• навыки работы с генеративными AI-моделями; опыт создания AI-агентов и использования их в работе.

Условия:

• регулярное обучение hard и soft skills в нашем корпоративном университете
• большое количество различных митапов и хакатонов с возможностью выступить на мероприятиях в качестве спикера
• льготная ипотека от Сбера для сотрудников
• прекрасный ДМС с лучшими клиниками города Москвы
• работа в лучшем офисе страны
• регулярный пересмотр заработной платы в зависимости от результатов
• бесплатный фитнес и тренажерный зал.