В SberData мы создаем централизованное хранилище данных. Сбер сегодня обладает одним из крупнейших в стране хранилищ данных - объем данных банка превысил 250 ПБ. За секунду с нашими данными совершается около 500 тысяч транзакций. Управляет данными Сбера департамент SberData: нашими решениями пользуются свыше 22 тысяч сотрудников банка и экосистем. В новом проекте необходимо возглавить направление разработки нового compute движка для работы с большими данными.
Сервис, который мы реализуем на текущий момент называется DataAPI. Он позволяет предоставлять LLM-приложениям (автономным AI-Агентам) доступ к данным корпоративной аналитической платформы.
Необходимо:
Проектировать, развивать и контролировать реализацию надежной, безопасной и масштабируемой архитектуры наших продуктов.
Задачи:
- проектирование, управление и согласование с основными стейкхолдерами архитектуры решений, улучшение существующей микросервисной архитектуры с учётом высоких требований к надёжности, производительности и масштабируемости
- участие в планировании по реализации задач, декомпозирование и описание архитектурных моделей (ADR, C4, TOGAF) и задач по их реализации разработчикам
- участие в согласовании с бизнес-заказчиками функциональных и нефункциональных требований и приоритетов работ
- контроль реализации архитектурных решений
- обеспечение безопасности решений и соблюдение требований банковских стандартов
- разработка новых функциональных модулей и API, интеграция с внутренними и внешними системами.
Мы ожидаем:
- опыт работы Solution-architect от 3+ лет)
- глубокое понимание принципов RESTful API design (HATEOAS, статусы HTTP, идемпотентность), стратегий версионирования и документации с использованием OpenAPI/Swagger
- production-опыт работы с Kubernetes (K8s) от 3 лет, понимание и умение конфигурировать ключевые ресурсы: Deployment, StatefulSet, Service, Ingress, PersistentVolumeClaim (PVC), ConfigMap, Secret
- практический опыт проектирования API-сервисов с требованиями к пропускной способности > 1000 RPS и задержке (latency) < 100 мс
- знание и умение применять на практике альтернативные протоколы и форматы: GraphQL(опционально), gRPC, а также форматы сериализации JSON и Protocol Buffers
- опыт проектирования и эксплуатации хранилищ данных (Data Warehouse) и аналитических БД, включая колоночные хранилища (ClickHouse, DuckDB) и системы распределенных запросов (Trino)
- понимание архитектуры Data Lake и HDFS, работа с эффективными форматами хранения данных: Parquet, ORC, Iceberg
- опыт проектирования и реализации ETL/ELT-процессов и конвейеров данных, включая стратегии инкрементальной загрузки
- практический опыт работы с Service Mesh (Istio) для управления трафиком, обеспечения безопасности (mTLS, политики доступа) и улучшения наблюдаемости (observability) в распределенных системах, глубокое знание протоколов HTTP
- production-опыт настройки и интеграции Kerberos-аутентификации для сервисов и приложений в корпоративной среде.
Мы предлагаем:
- комфортный современный офис: БЦ Даниловский форт, рядом с М.Тульская, Верхние котлы
- возможность выбрать удобный график – офис/гибрид
- ежегодный пересмотр зарплаты, годовая премия
- корпоративный спортзал и зоны отдыха
- более 400 образовательных программ СберУниверситета для профессионального и карьерного развития
- расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа
- гибкий дисконт по ипотечному кредиту, равный 1/3 ключевой ставки ЦБ
- бесплатная подписка СберПрайм+, скидки на продукты компаний-партнеров
- вознаграждение за рекомендацию друзей в команду Сбера.