Проектирование системы мониторинга качества данных (DQM):
Выявление, классификация и формализация метрик качества данных для различных объектов данных (таблицы, атрибуты, пайплайны);
Разработка требований к движку проверок качества;
Проектирование процессов обработки инцидентов качества: описание жизненного цикла DQ-инцидента;
Определение и формализация бизнес-правил (Business Rules) и технических стандартов качества для критичных данных (маскирование, форматы, допустимые значения, ссылочная целостность);
Проектирование интеграции DQ-системы с Каталогом Данных;
Проектирование интеграции с инструментами оркестрации (Airflow, DagFactory);
Проектирование системы оповещений;
Разработка требований к дашбордам и отчетам для визуализации показателей качества данных.
Требования:
Опыт проектирования и внедрения систем управления качеством данных (Data Quality Frameworks);
Опыт внедрения фреймворков для валидации и контроля качества данных;
Опыт работы с инструментами: Great Expectations, Deequ, Soda, Monte Carlo, dbt tests;
Опыт разработки документации и стандартов по качеству данных, SLA, ownership моделей;
Опыт работы в области Data Engineering, Data Governance, Data Quality или Data Platform;
Отличное знание SQL.
Условия:
Оформление в штат в соответствии с ТК РФ;
График работы: 5/2 с 09:00 до 18:00 (в пятницу до 16:45);
Работа в аккредитованной Минцифрами ИТ-компании;
Конкурентоспособная заработная плата (обсуждается по результатам собеседования);
Соц.пакет: программа ДМС со стоматологией, корпоративная мобильная связь, санаторно – курортное лечение;
Возможность расти как вертикально, так и повышать уровень своих профессиональных и деловых компетенций;
Внутреннее обучение: конференции, тренинги, мастер-классы, корпоративный университет. Внешнее обучение по направлению профессиональной деятельности;
Возможность присоединиться к нашим спортивным командам по мини-футболу, баскетболу, волейболу или чирлидингу;
Корпоративная электронная библиотека;
Комфортный офис в бизнес-центре "NordStar" с удобным расположением, возможен удаленный формат работы (5 мин пешком от метро «Беговая», МЦД-1).