Middle Data Engineer

О компании

«Верный Ломбард» — финансовая компания, работающая на микрофинансовом рынке.
Мы находимся в фазе активного роста и выстраиваем централизованную платформу данных для аналитики и BI-отчётности (Power BI).

Роль предполагает реальное влияние на стабильность данных и развитие data-инфраструктуры, а не ручную поддержку отчётов.

Задачи

Загрузка и обработка данных

• Настройка и поддержка ежедневной загрузки данных из:

  • ERP-систем

  • CRM

  • Google Sheets

  • API и файлов (CSV / Excel)

• Реализация инкрементальных загрузок

• Контроль качества и корректности данных (дубликаты, пропуски, типы, аномалии)

• Восстановление пайплайнов после сбоев без потери и дублирования данных

Работа с базой данных

• Проектирование и поддержка структуры БД

• Работа со слоями данных:

  • raw

  • stage

  • mart

• Оптимизация SQL-запросов

Аналитические витрины

• Создание витрин данных под BI-отчётность (Power BI)

• Подготовка агрегатов, расчётных показателей и KPI

• Документирование логики витрин и трансформаций

Надёжность процессов

• Настройка расписаний загрузок

• Логирование, обработка ошибок, контроль падений

• Поддержка стабильной ежедневной работы пайплайнов

Взаимодействие с командой

• Совместная работа с аналитиками

• Понимание бизнес-логики и требований к данным

• Участие в развитии архитектуры данных

Требования

Обязательные

• Опыт работы Data Engineer / Analytics Engineer от 2 лет

• Уверенный SQL (PostgreSQL / MS SQL)

• Понимание принципов:

  • ETL / ELT

  • нормализации данных

  • fact / dimension / аналитических витрин

• Опыт загрузки данных из:

  • API

  • Google Sheets

  • файлов (CSV / Excel)

• Опыт работы с инкрементальными загрузками

• Python для работы с данными (pandas, requests и аналоги)

• Понимание архитектуры хранилищ данных

Будет плюсом

• Orchestration-инструменты (n8n, Airflow, Prefect и т.п.)

• Опыт работы с ERP или финансовыми данными

• Опыт работы с Power BI

• Понимание data quality и мониторинга

• Опыт документирования (STTM, схемы данных)

Мы ожидаем

• Самостоятельность и ответственность за результат

• Процессное мышление, а не только написание кода

• Ориентацию на надёжность и стабильность данных

• Интерес к развитию data-инфраструктуры

Мы предлагаем

• Участие в построении и развитии централизованной data-платформы

• Реальное влияние на архитектуру и процессы

• Понятные бизнес-задачи, а не «отчёты ради отчётов»

• Гибкий формат работы

• Конкурентную заработную плату (обсуждается по итогам интервью)