Системный аналитик

Команда проекта создает и развивает корпоративный движок потоковой обработки данных, который используется разработчиками банка для построения приложений обработки данных в реальном времени (фрод-мониторинг, скоринг, обогащение транзакций, расчеты)

Твои задачи:

• Проектировать платформенные функции Flink

• Анализировать и прорабатывать технические задания
• Принимать реализацию механизмов Stateful-обработки с использованием внешних State Backends, включая S3-совместимые объектные хранилища, HBase и Fluss
• Проектировать сценарии соединения с большими справочниками и хранения состояния приложений
• Проектировать решения для повышения отказоустойчивости и управляемости приложений, включая savepoints, автоматическое масштабирование и восстановление
• Разрабатывать требования к интеграции Flink-приложений с корпоративными системами аутентификации, управления секретами, логирования и мониторинга, включая ELK, Prometheus и Grafana
• Разрабатывать процессы управления и мониторинга
• Прорабатывать требования к системе мониторинга состояния Flink-кластеров и заданий
• Настраивать мониторинг метрик JVM, backpressure, длительности checkpoint и lag
• Анализировать и проектировать процессы управления жизненным циклом приложений, включая развертывание, обновление и остановку
• Проектировать управление приложениями через специализированный корпоративный портал управления сервисами
• Интегрировать Flink JobManager и REST API с корпоративным порталом.

• Работать с потребителями и обеспечивать качество

• Выявлять и формализовывать потребности внутренних команд разработки
• Создавать подробную техническую документацию, чек-листы и рекомендации по эффективному использованию платформы
• Тестировать реализованные функции
• Разрабатывать тест-планы и тестовые сценарии, включая негативные и нагрузочные проверки
• Проводить приемо-сдаточные испытания

Что мы ждем от тебя:

• Опыт работы системным или бизнес-аналитиком от 4 лет, из них не менее 2 лет в области потоковой обработки данных или Big Data
• Опыт проектирования и описания интеграций через REST API
• Знание принципов работы систем мониторинга: Prometheus, Grafana. Умение читать и интерпретировать метрики
• Продвинутый уровень SQL, умение работать с технической документацией (RFC, официальная docs)
• Навыки декомпозиции сложных задач, построения процессов, отличные коммуникационные навыки для работы с техническими командами (разработчики, DevOps) и потребителями (data-инженеры)
• Умение четко и структурно документировать требования в виде ТЗ/User Stories с критериями приемки

Будет плюсом:

• Глубокое понимание архитектуры Apache Flink: концепции операторов, state, checkpointing, savepoints, exactly-once семантика, роль JobManager/TaskManager
• Практический опыт проектирования или эксплуатации Flink-приложений. Понимание проблематики хранения и восстановления состояния
• Знание экосистемы Hadoop/ Big Data: HDFS, HBase, Kafka. Понимание принципов работы с объектными хранилищами (S3)
• Опыт работы с Kubernetes: понимание основных концептов (Pods, Deployments, Services, ConfigMaps)

Что мы обеспечиваем:

• Внутренние семинары, митапы, мы очень любим учиться новому
• ДМС со стоматологией для сотрудников и скидку на покупку ДМС для ближайших членов семьи
• Технику для комфортной работы
• Сессии профессионального развития персонала, результатом которой является план индивидуального развития каждого сотрудника