Data Quality Engineer Middle\Middle+

Группа Компаний Орбита - ведущий разработчик цифровых решений, российская аккредитованная ИТ-компания.

Масштабный технологический проект с глубокой экспертизой в цифровизации бизнеса. Ключевые отрасли: государственный сектор, FinTech, HR Tech, коммуникации и медиа, услуги, рынок недвижимости, travel.

Нам доверяют крупнейшие компании РФ, среди них: Т1, ВТБ, Иннотех, Альфа Банк, ОИС и другие.

Более 6 лет мы ведем собственную продуктовую и заказную разработку высокоэффективных цифровых решений.

Сейчас мы ищем Data Quality Инженера уровня Middle\Middle+ в Банк ТОП-5.

Обязанности:

• Контроль качества данных, внедрение проверок и мониторинг корректности витрин.
• Разработка и поддержка витрин данных.
• Проектирование и оптимизация SQL-запросов для формирования витрин и проверок качества данных.
• Взаимодействие с командами продуктовой аналитики и бизнес-подразделениями для уточнения требований.
• Подготовка документации и описание логики витрин и проверок.
• Разработка ETL-процессов и пайплайнов (Airflow/Oozie/Spark).
• Создание процедур контроля качества данных для витрин
• Разработка и внедрение проверок, гарантирующих точность, полноту и согласованность отображаемой информации.
• Организация мониторинга проверок и оперативного реагирования на инциденты
• Построение системы наблюдения, автоматических оповещений и быстрых действий при обнаружении отклонений.
• Разработка и согласование SLA с системами‑источниками данных
• Формирование чётких обязательств по доступности, своевременности и качеству поставляемой информации, а также их официальное утверждение с поставщиками

Требования:

• Уверенное владение SQL, опыт применения различных типов JOIN и оптимизации запросов.
• Опыт работы с базами данных: PostgreSQL, Oracle, MSSQL, Cassandra, Redis, Greenplum.
• Понимание принципов data quality (контроль, мониторинг, валидации).
• Знание HDFS-стека: Hive, Spark (PySpark), Hue, Oozie, Airflow.
• Навыки работы в терминале с HDFS.
• Базовые навыки оптимизации хранения и доступа к данным.
• Знание Python и опыт анализа и обработки данных.
• Опыт разработки проверок качества данных
• Опыт решения задач с Bl-инструментами (PowerBl/Tableau)
• Потоковая обработка данных с помощью Kafka/Flink
• Опыт работы с feature store/market инструментами
• Опыт работы с внешними источниками данных (создание ETL процессов)
• Понимание принципов работы ML/AI-моделей и требований к данным для их обучения.

Что мы предлагаем:

• Гибридный формат работы: м. Технопарк
• Деньги: белую ЗП всегда в рынке, оформление ТК РФ;
• Комфортный старт: 3 месяца плавного погружения под присмотром HR;
• Поддержка: ИТ-отсрочку и HR / юридические консультации 24/7;
• Культура: прозрачные процессы и открытую коммуникацию;
• Мощное железо: работу на лучших компах, мы не логируем время, у нас фокус на доверии и результате;
• ДМС: твое лечение за счет компании;
• Развитие: индивидуальный план обучения, конференции и митапы, мы помогаем развиваться и строить карьеру;
• Личный бренд: выступления на конференциях, митапах, написание статей;
• Бенефиты: ежеквартальное обновление корпоративных скидок;
• Движ: вечеринки оффлайн и онлайн, мерч, конкурсы и челленджи.