В SberData мы создаем централизованное хранилище данных. Сбер сегодня обладает одним из крупнейших в стране хранилищ данных - объем данных банка превысил 250 ПБ. За секунду с нашими данными совершается около 500 тысяч транзакций. Управляет данными Сбера департамент SberData: нашими решениями пользуются свыше 22 тысяч сотрудников банка и экосистем
О Команде
Вы возглавите команду, отвечающую за ядро платформы обработки данных на базе Trino (Presto SQL) и Apache Flink. Мы решаем сложные задачи распределенных вычислений, обеспечивая скорость, надежность и эффективность работы с большими данными.
Обязанности
Техническое Лидерство и Архитектура
- разработка и внедрение архитектурных решений для Trino, Flink
- проведение технического анализа задач, производительности и надежности систем
- принятие ключевых технических решений.
Разработка, Оптимизация и Интеграция Движков
- глубокая разработка, оптимизация и расширение функциональности Trino и Flink для максимальной скорости обработки запросов
- эффективные интеграции: Проектирование и реализация надежных, высокопроизводительных интеграций с источниками/приемниками данных: Hadoop (Hive), Greenplum, PostgreSQL, ClickHouse, Kafka.
Развитие команды
- техническое наставничество, код-ревью
Требования
- 4+ года на Java, 2+ года как Senior Java Developer / Tech Lead в BigData
- экспертиза в движках: Глубокий опыт разработки/оптимизации Trino (Presto SQL) и Apache Flink
- технологии данных: Практика с Hadoop (Hive), Greenplum, PostgreSQL, ClickHouse, Kafka
- архитектура: Опыт проектирования сложных решений, микросервисов, понимание ETL/Data Mart
- инфраструктура: Работа с Kubernetes. Понимание BigData-экосистемы.
Желательные навыки
- опыт с Spark, облаками (AWS/GCP/Azure), Scala/Python.
- знание систем мониторинга (Prometheus, Grafana).
Условия
- комфортный офис рядом с м. Тульская, после испытательного срока возможность работать в гибридном графике
- ежегодный пересмотр зарплаты, годовая премия
- корпоративный спортзал и зоны отдыха
- более 400 образовательных программ СберУниверситета для профессионального и карьерного развития
- программа адаптации и помощь руководителя на старте (для Junior позиций)
- расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа
- льготная ипотека для каждого сотрудника
- бесплатная подписка СберПрайм+, скидки на продукты компаний-партнеров
- вознаграждение за рекомендацию друзей в команду Сбера.
- корпоративная пенсионная программа
- отсутствие строгого дресс-кода