LIAN — системный интегратор с фокусом в аналитике и управлении данными.
Мы работаем в трех направлениях:
1. Автоматизация управленческой отчетности (BI) в малом и среднем бизнесе. Строим хранилища данных, настраиваем сбор и интеграцию, разрабатываем отчеты и дэшборды. Наш стек в BI включает все современные инструменты, в том числе open-source ПО.
2. Заказная разработка аналитических систем. Когда у нашего клиента есть специфичный запрос, мы разрабатываем аналитические системы с нуля. Часто применяем подходы BigData, Data Science, актуальные подходы к программному анализу данных и прогнозированию.
3. Запуск и ресурсное обеспечение команд разработки в комплексных проектах цифровой трансформации. Мы усиливаем команды наших партнеров и клиентов собственными сотрудниками и обеспечиваем максимально быстрый старт новых проектов. Среди наших заказчиков - крупные системные интеграторы, банки, нефтегазовые, химические производства, логистические компании, стартапы.
Сейчас мы приглашаем опытного аналитика DWH/ Data аналитика на проекты со сроком более 6 месяцев!
Чем предстоит заниматься:Развитие платформы управления ETL-процессами: Полный цикл ответственности за планировщик задач: от проектирования и развертывания рабочих процессов (DAG) до их мониторинга, настройки оповещений и обеспечения отказоустойчивости.
Миграция и консолидация данных: Перенос информации из унаследованных реляционных систем в современное хранилище с акцентом на оптимизацию логики извлечения и загрузки.
Инвентаризация и анализ legacy-систем: Детальное изучение структуры и логики существующих источников данных: маппинг бизнес-сущностей, документирование процессов и выявление скрытых зависимостей.
Контроль качества данных: Внедрение и поддержка процедур валидации, тестирования и мониторинга целостности информации на всех этапах её движения и преобразования.
Создание аналитических данныхых слоев: Разработка, тестирование и поддержка логики бизнес-преобразований (трансформаций) с использованием современных инструментов для формирования готовых к использованию данныхых витрин.
Оптимизация загрузки данных: Проектирование и внедрение механизмов инкрементального обновления информации, а также аудит и улучшение производительности существующих пайплайнов.
Интеграция потоковой обработки: Настройка взаимодействия с шиной событий для обработки и интеграции данных в режиме, близком к реальному времени.
Опыт работы аналитиком данных более 5 лет;
Не менее 3 лет коммерческого опыта в компаниях с сильной культурой работы с данными;
Опыт работы с Apache Airflow в корпоративной среде: настройка и управление дата-пайплайнами, разработка DAG на Python для автоматизации ETL процессов, оптимизация и мониторинг выполнения DAG;
Опыт работы со стеком:
Python
хранилище S3,
стриминг Kafka,
СУБД Postgres, MSSQL, MongoDB, Clickhouse;
Практический опыт в проектировании и реализации сквозных процессов обработки данных (ETL/ELT) от постановки бизнес-задачи до готового решения, с глубоким пониманием этапов трансформации и интеграции.
Знакомство с практиками документирования и организации метаданных (Data Catalog) для эффективного управления активами данных.
Опыт моделирования данных, ориентированный на аналитические нагрузки: умение проектировать структуры, обеспечивающие производительность хранилища и удобство для конечных пользователей.
Навыки работы с потоковыми данными (например, Apache Kafka). Обязателен практический опыт в настройке, оптимизации и масштабировании таких систем; опыт развертывания будет дополнительным преимуществом.
Свободное владение SQL для решения нетривиальных задач: построение сложных запросов с использованием CTE и оконных функций, оптимизация их производительности, работа с разнородными источниками.
Солидный бэкграунд в работе с реляционными СУБД: понимание внутренней структуры, механизмов хранения и стратегий эффективного наполнения данными.
Навыки работы с системами контроля версий (Git).
Опыт работы в финтех;
Опыт настройки CI/CD для дата-процессов;
Опыт работы с облачными платформами (Yandex.Cloud);
Опыт или понимание фондового рынка и инвестиционных инструментов.
В нашей команде работают профессионалы с разносторонним опытом. Здесь ты найдешь профессиональные задачи и новые вызовы, сможешь реализовать свой потенциал.
Хочешь стать частью нашей команды? Мы ждем твоего отклика и свяжемся с тобой !