Senior Platform Engineer (аналог Hadoop/Spark)

• Крупный высоконагруженный кластер YTsaurus (аналог Hadoop/Spark) для хранения и обработки петабайтов данных.
• Инфраструктура развернута в Kubernetes с использованием Operator и CRD.
• Задача: обеспечить 24/7 доступность, масштабируемость и автоматизацию платформы для команд Data Engineering и аналитики.

Обязанности

• развертывание, конфигурация и сопровождение кластеров YTsaurus в K8s (Helm, Operator)
• управление компонентами: Masters, Data/Tablet/Exec Nodes, Scheduler, Proxies, Query Tracker
• настройка Persistent Volumes, storage locations, replication factor и снапшотов (changelogs/snapshots)
• планирование ресурсов (CPU/RAM/IOPS/Storage) и управление квотами (accounts, pools, bundles)
• разработка безопасных процедур upgrade/rollback и вывода узлов из эксплуатации (drain)
• настройка мониторинга (Prometheus + Grafana + Odin) и сбор логов
• участие в устранении инцидентов, RCA и postmortem
• автоматизация на Python/Bash, управление конфигурацией через Ansible/Terraform
• развитие CI/CD пайплайнов (GitLab)
• управление доступом (ACL, RBAC, токены, группы) и интеграция с Vault.

Требования

• Опыт от 5 лет в DevOps/SRE/Platform Engineering
• Обязательный опыт эксплуатации YTsaurus в продакшене
• Экспертное знание Kubernetes: StatefulSet, Operators, CRD, Helm, PV/C SI, Network Policies, affinity/taints
• Глубокое знание Linux: I/O, память, cgroups, network stack, диагностика производительности
• Понимание сетей: TCP/IP, DNS, HTTP/HTTPS, TLS, L4/L7 балансировка
• Владение Python и Bash для автоматизации
• Опыт с Ansible, Terraform, GitLab CI/CD
• Навыки работы с Prometheus/Grafana и системами логирования

Будет плюсом:

• знание архитектуры YTsaurus (Cypress, Hydra, Chunks, Tablet Cells, dynamic config)
• опыт с CHYT, SPYT, YQL или Query Tracker
• разработка Kubernetes Operators (Go/Python)
• опыт с Hadoop/HDFS/Spark или ClickHouse/PostgreSQL
• понимание SRE-практик: SLI/SLO, Error Budget, Capacity Planning, Disaster Recovery drills
• опыт multi-cluster / multi-DC инфраструктуры
• нагрузочное тестирование и тюнинг производительности.

Условия

• стабильный оклад и премии по результатам работы, ежегодный пересмотр зарплаты
• комфортный современный офис рядом с м.Кутузовская
• гибридный формат работы: встречаемся очно в офисе 1 раз в неделю
• корпоративный спортзал и зоны отдыха
• уникальная система обучения Сбера для профессионального и карьерного развития
• программа адаптации и помощь руководителя на старте
• расширенный ДМС и льготное страхование семьи
• гибкий дисконт по ипотечному кредиту, равный 1/3 ключевой ставки ЦБ
• бесплатная подписка СберПрайм, скидки на продукты компаний-партнеров
• вознаграждение за рекомендацию друзей в команду Сбера
• корпоративная пенсионная программа