Аналитик качества данных/Data Quality Analyst

IEK GROUP – один из ведущих производителей на рынке электротехнического оборудования. Мы разрабатывает и производим инновационные решения для энергетики, промышленности и инфраструктуры. В рамках цифровой трансформации бизнеса мы расширяем команду и ищем Аналитика качества данных.

Вам предстоит работать в отделе Управления данными офиса Данных компании IEK. Отдел - 9 человек с прямым подчинением CDO. 2 daily в неделю по 30 минут + полчаса на работу с тасктрекером.

Удаленка, любые часовые пояса.

Ваша главная задача — гарантировать, что данные, поступающие из различных систем-источников (CRM, ERP и др.) в хранилище, остаются точными, полными и пригодными для принятия стратегических решений.

Вы будете выстраивать процессы кросс-проверок, профилировать сырые данные и внедрять стандарты качества, которые помогут бизнесу доверять каждой цифре в отчетах.

Чем предстоит заниматься:

• Профилирование и мониторинг: использование инструментов для обнаружения дефектов, аномалий и несоответствий в данных
• Очистка и валидация: приведение данных в порядок для сохранения их целостности и проверка на соответствие бизнес-правилам
• Анализ систем-источников: аудит данных в первичных системах (CRM, ERP, логи) перед их загрузкой в DWH, чтобы минимизировать попадание «грязных» данных в хранилище. Кросс-проверки (Reconciliation): проведение сверки данных между системами-источниками и DWH. Выявление изменений на системах - источниках.
• Взаимодействие с бизнес-владельцами: сбор и формализация требований к качеству данных от владельцев бизнес-процессов, помощь в интерпретации правил валидации.
• Анализ первопричин (Root Cause Analysis): отслеживание того, как ошибки распространяются от систем-источников до конечных витрин данных
• Отчетность и управление (Governance): разработка метрик и отчетов для контроля «здоровья» данных.
• Коллаборация: работа с дата-инженерами и стюардами данных для определения стандартов загрузки.

Наши ожидания:

• Опыт работы в роли аналитика данных, инженера данных или аналитика качества данных
• Опыт построения систем мониторинга качества данных с нуля или масштабирования существующих процессов DQ (Data Quality)
• Успешное участие в миграции данных, настройке ETL/ELT процессов с фокусом на валидацию данных на входе и выходе
• Успешный опыт профилирования данных (SQL-анализ) в DWH (Snowflake, ClickHouse, Greenplum).

Hard Skills:

• SQL: продвинутый уровень (знание оконных функций, оптимизация запросов, написание сложных аналитических запросов для профилирования данных)
• Понимание DWH, ETL/ELT. Инструменты DQ: опыт работы с фреймворками (Great Expectations [python]) или коммерческими платформами (Data Quality в DWH, Collibra, OMD)
• Инженерия данных: понимание архитектуры (Airflow, SSIS)
• Навыки написания тестов
• Аналитика: умение проводить профилирование данных (выявление аномалий, дублей, нулевых значений, статистических выбросов)
• Скриптинг: Python (pandas, pyspark) для автоматизации проверок качества и написания скриптов очистки данных
• Методологии: знание подходов к оценке качества данных по методологии (точность, полнота, целостность, своевременность). Опыт настройки алертингов (мониторинг аномалий, свежести данных, полноты).

Soft skills:

• Скептицизм и критическое мышление: «Доверяй, но проверяй»
• Склонность подвергать сомнению входные данные и готовность аргументированно доказывать необходимость исправления ошибок
• Структурное мышление: cпособность формализовать требования к качеству данных в виде кода и чек-листов
• Коммуникабельность: умение мягко, но настойчиво доносить до владельцев данных (бизнес-юнитов) и разработчиков необходимость исправления корневых причин проблем, не ограничиваясь «закрытием инцидента»
• Стрессоустойчивость: умение быстро локализовать проблему
• Документирование: педантичность в ведении документации (Data Catalog, Data Lineage, реестр инцидентов)

Мы предлагаем

• Удаленный график работы
• Достойный уровень дохода (зависит от профессиональных компетенций)
• Расширенный социальный пакет: ДМС, дополнительные отпускные дни, оплата больничного листа, материальная помощь в критических ситуациях, бесплатные оздоровительные/спортивные мероприятия
• Правительственные льготы – мы аккредитованная IT-компания
• Комфортная, доброжелательная рабочая атмосфера
• Корпоративные традиции и праздники, коллективные мотивационные программы