DevOps Engineer (DataSoft)

Сейчас мы ищем DevOps Engineer.

О команде:

Команда: DataSoft.

Ключевая цель продукта – обеспечить инфраструктуру для MLOps и DATAOps команд. Предоставлять сервисы, платформы и тулы, направленные на последовательное и эффективное внедрение и поддержку моделей машинного обучения (ML).

От успешного соискателя мы ожидаем:

• Опыта работы/понимания принципов и устройства k8s;
• Знания DevOps практик;
• Опыт работы с ArgoCD;
• Уверенное владение Helm;
• Понимания концепции хранилищ данных и ETL-процессов;
• Понимания особенностей приложений дата слоя;
• Опыта работы с системами управления конфигурациями (преимущественно Ansible);
• Опыт работы с OLAP;
• Уверенных отношений с Prometheus/VictoriaMetrics+Grafana;
• Умения работать в кросс-командных коммуникациях;
• Желания нести порядок в инфраструктуру дата слоя.

Будет плюсом:

• Опыт развёртки, оптимизации и масштабирования Apache Airflow, JupyterHub.

Чем предстоит заниматься:

• Внедрять и развивать инструменты для работы Data Engineering, Data Analytics, Machine Learning;
• Разрабатывать и развивать решения “as a Service”/”as a Platform”;
• Участвовать в локализации инцидентов, устранять их последствия;
• Автоматизировать процессы и рутину;
• Строить качественный и понятный мониторинг для сервисов.

Стек:

• BigData: JupyterHub, MLflow, Triton, Trino, Hive-Metastore, OpenMetaData;
• DBMS: PostgreSQL, MSSQL, GreenPlum, ClickHouse, Cassandra, Scylla, Redis, MongoDB, Hadoop;
• Orchestrator: Airflow;
• CI/CD: GitLab, ArgoCD, ArgoFlow;
• ConfigManagment: Ansible;
• Service Languages: Go, Python;
• Data Languages: Python, Spark;
• ObjectStorage: Minio.