Анализ и формализация требований к функционалу Каталога Данных;
Проектирование функциональности и модели метаданных Каталога;
Проектирование и описание структуры метаданных: что мы будем хранить (технические метаданные, бизнес-глоссарий, метрики качества, линии владения, теги), как это будет связано между собой;
Разработка и формализация требований к новым функциям каталога (в виде пользовательских историй, моделей данных, диаграмм состояний и процессов);
Проектирование онтологии данных (Data Domain) и бизнес-глоссария;
Проектирование и описание интеграций Каталога Данных с другими компонентами платформы:
С источниками данных (БД, Kafka, DWH, Data Lake) для автоматического сбора технических метаданных;
С инструментами оркестрации (Airflow, dbt) для сбора информации о пайплайнах;
С BI-системами для сбора метаданных дашбордов и отчетов;
С системами аутентификации и авторизации для настройки ролевого доступа к данным в каталоге.
Требования:
Понимание принципов и практик Data Governance: знание что такое метаданные, данные, глоссарий, стюарды/стюарды данных, качество данных, классификация данных;
Опыт работы с одним из популярных Data Catalog-инструментов: OpenMetadata, DataHub, Apache Atlas или аналогами (Alation, Collibra, Amundsen). Понимание их архитектуры, возможностей и ограничений;
Понимание основ работы с данными: базовые знания SQL, представление о ETL/ELT-процессах, DWH/Data Lake/ LakeHouse;
Опыт работы с PostgreSQL, ClickHouse;
Опыт работы с реляционными и нереляционными базами данных;
Опыт и понимание работы распределённых SQL-движков trino/dbt.
Условия:
Оформление в штат в соответствии с ТК РФ;
График работы: 5/2 с 09:00 до 18:00 (в пятницу до 16:45);
Работа в аккредитованной Минцифрами ИТ-компании;
Конкурентоспособная заработная плата (обсуждается по результатам собеседования);
Соц.пакет: программа ДМС со стоматологией, корпоративная мобильная связь, санаторно – курортное лечение;
Возможность расти как вертикально, так и повышать уровень своих профессиональных и деловых компетенций;
Внутреннее обучение: конференции, тренинги, мастер-классы, корпоративный университет. Внешнее обучение по направлению профессиональной деятельности;
Возможность присоединиться к нашим спортивным командам по мини-футболу, баскетболу, волейболу или чирлидингу;
Корпоративная электронная библиотека;
Комфортный офис в бизнес-центре "NordStar" с удобным расположением, возможен удаленный формат работы (5 мин пешком от метро «Беговая», МЦД-1).