сканирование ИТ-ландшафта: искать, анализировать и верифицировать новые системы и источники данных под задачи бизнеса;
исследование данных: описывать сущности, атрибуты и связи в источниках, оценивать качество и пригодность данных для интеграции в DWH;
проектирование интеграций: определять оптимальные методы забора данных (батч/стриминг) совместно с архитекторами и командами источников;
кросс-функциональные коммуникации: выступать «мостиком» между владельцами систем-источников, ИТ-командами, безопасностью и инженерами данных;
согласование контрактов: организовывать процессы доработки API/событийных моделей на стороне систем-источников для передачи данных в DWH;
постановка на ETL/ELT: составлять ТЗ для дата-инженеров на выгрузку данных из новых источников и проектирование процессов загрузки;
моделирование витрин: ставить задачи на разработку базовых витрин данных в зоне ответственности команды DWH (определять логику, правила расчёта, гранулярность);
Data Quality: участвовать в разработке проверок качества данных, выявлять аномалии и проводить root-cause анализ инцидентов совместно с инженерами;
Data Governance: вести документацию в каталоге данных (OpenMetadata), поддерживать актуальность data lineage и бизнес-глоссария;
сбор требований: взаимодействовать с риск-аналитиками, BI-аналитиками и бизнес-подразделениями, собирать, уточнять и формализовать их потребности.
Ожидания от кандидата:
опыт работы: от 3 лет в роли системного аналитика в проектах DWH, BI или интеграции данных;
уверенный SQL: написание сложных запросов, использование оконных функций, профилирование и глубокий анализ данных. Наши СУБД — Greenplum (основное хранилище), ClickHouse, PostgreSQL;
архитектурный кругозор: понимание принципов построения хранилищ (слоистая архитектура Staging / Core / Data Mart) и подходов к моделированию данных (звезда / снежинка);
опыт интеграций: практический навык анализа незнакомых систем-источников, чтения их схем данных и формализации требований к выгрузке;
проектирование: опыт составления сквозных Source-to-Target маппингов и написания понятных ТЗ для дата-инженеров;
понимание ETL/ELT: знание того, как устроен жизненный цикл и путь данных от сырого источника до конечной витрины;
интеграционные шины: базовое понимание потоковой доставки данных через Kafka (как одного из ключевых способов поставки данных в DWH);
Soft Skills: сильные коммуникативные навыки, умение находить общий язык как с бизнес-заказчиками, так и с техническими командами смежных систем.
Будет плюсом:
опыт работы в финтех-индустрии;
практический опыт работы с Greenplum и/или ClickHouse;
понимание оркестрации на Airflow (умение читать DAG, обсуждать расписания и зависимости с инженерами);
знакомство с методологиями моделирования Data Vault / Anchor / 3NF;
опыт работы с каталогами данных (OpenMetadata или аналоги) и инструментами Data Quality.