ETL-разработчик

LIAN — системный интегратор с фокусом в аналитике и управлении данными.

Мы работаем в трех направлениях:

1. Автоматизация управленческой отчетности (BI) в малом и среднем бизнесе. Строим хранилища данных, настраиваем сбор и интеграцию, разрабатываем отчеты и дэшборды. Наш стек в BI включает все современные инструменты, в том числе open-source ПО.

2. Заказная разработка аналитических систем. Когда у нашего клиента есть специфичный запрос, мы разрабатываем аналитические системы с нуля. Часто применяем подходы BigData, Data Science, актуальные подходы к программному анализу данных и прогнозированию.

3. Запуск и ресурсное обеспечение команд разработки в комплексных проектах цифровой трансформации. Мы усиливаем команды наших партнеров и клиентов собственными сотрудниками и обеспечиваем максимально быстрый старт новых проектов. Среди наших заказчиков - крупные системные интеграторы, банки, нефтегазовые, химические производства, логистические компании, стартапы.

Сейчас мы приглашаем опытного ETL-разработчика (со знанием Debezium)

- Проектирование, разработка и оптимизация ETL/ELT-процессов и потоков данных;
- Внедрение и настройка Debezium-коннекторов для генерации событий об изменениях в БД;
- Настройка и сопровождение потоковой передачи данных через Kafka (включая обработку, трансформации и сериализацию сообщений);
- Работа с Apache NiFi / Arenadata Streaming для организации потоков данных;
- Разработка и поддержка витрин данных для аналитики и BI;
- Диагностика и оптимизация производительности, обеспечение качества и консистентности данных;
- Взаимодействие с командами разработчиков и архитекторами для интеграции решений в общую архитектуру.

- Опыт работы с Apache NiFi (Arenadata Streaming) и Debezium;
- Опыт работы с Apache Kafka; понимание событийно-ориентированной архитектуры;
- Практика проектирования и оптимизации ETL/ELT-процессов;
- Опыт построения и поддержки витрин данных (data marts);
- Знание особенностей СУБД: PostgreSQL, Oracle, MS SQL;
- Уверенные навыки SQL и умение писать скрипты на pgSQL (PL/pgSQL), PL/SQL, T-SQL.
- Опыт замещения/миграции CDC-решений (например, замена GoldenGate);
- Знание форматов сообщений и схем (pgSQL , JSON, Protobuf), работы с Schema Registry;
- Навыки мониторинга и логирования потоков данных, опыт использования инструментов наблюдаемости;
- Опыт работы в облачной среде (AWS/GCP/Azure) и с контейнерами/оркестрацией (Docker, Kubernetes).

• Форма трудоустройства на ваш выбор: договору оказания услуг с ИП или самозанятым
• Участие в интересных масштабных проектах с Заказчиками федерального и международного уровня
• Работа с передовыми технологиями
• Возможности профессионального и карьерного роста
• Полностью удаленная работа
• Регулярная и достойная оплата труда

В нашей команде работают профессионалы с разносторонним опытом. Здесь ты найдешь профессиональные задачи и новые вызовы, сможешь реализовать свой потенциал.
Хочешь стать частью нашей команды? Мы ждем твоего отклика и свяжемся с тобой !