Москва, Западный административный округ, Можайский район, Инновационный центр Сколково
«М.ТЕХ» - АККРЕДИТОВАННАЯ ИТ-КОМПАНИЯ В ГРУППЕ «М.ВИДЕО-ЭЛЬДОРАДО» разрабатывает более 100 инновационных ИТ-продуктов на основе современной микросервисной и облачной инфраструктуры, больших данных, биометрии, ИИ и машинного обучения для улучшения качества жизни десятков тысяч сотрудников и миллионов покупателей по всей России.
МЫ В ПОИСКЕ DEVOPS-ИНЖЕНЕРА
Проект: Платформа данных Data Lakehouse.
DevOps: разворачивают и поддерживают инфраструктуры Data Lakehouse.
Мы разрабатываем и поддерживаем инфраструктуру обработки данных: проводим миграцию с текущего стека (Greenplum + ClickHouse) на современный (Trino + Iceberg), оптимизируем ETL процессы, обеспечиваем надёжность и производительность пайплайнов.
Стек: Docker/Kubernetes, Prometheus, Grafana, Trino/StarRoks, S3, PostgreSQL, Spark, Git, IaC (Infrastructure as Code).
ТЕБЕ ПРЕДСТОИТ:
Настройка и поддержка инфраструктуры Kubernetes (Bare-metal, Managed);
Настройка, поддержка и оптимизация кластеров Apache Spark внутри K8Sи оптимизация ресурсов;
Настройка и поддержка Apache Airflow, в том числе внутри K8S;
Описание инфраструктуры с помощью Terraform / Ansible;
Разработка и внедрение процессов непрерывной интеграции и доставки (CI/CD Gitlab);
Мониторинг и оповещение о проблемах с инфраструктурой и приложениями (Prometheus, Grafana).
ЧТО МЫ ОЖИДАЕМ ОТ КАНДИДАТА:
Опыт администрирования Linux-систем и контейнеризации Docker/Kubernetes, в том числе в части Spark, Airflow;
Опыт управления конфигурациями (Ansible, Terraform);
Уверенное использование систем контроля версий Git и построение рабочих процессов CI/CD;
Понимание принципов IaC (Infrastructure as Code) и опыт написания декларативных манифестов Kubernetes;
Хорошее владение инструментами мониторинга и логирования (Prometheus, Grafana);
Понимание жизненного цикла Spark-приложений (Driver, Executors), работа с локальными дисками и S3 (найти в резюме);
Знания Python/Bash/Go для автоматизации процессов и скриптов.
ЧТО ТЫ ПОЛУЧИШЬ: