Инженер данных (Data Engineer)

Третье Мнение — разработчик IT-решений для системы здравоохранения. Мы создаём продукты на основе технологий искусственного интеллекта, которые помогают автоматизировать процессы в медицинских организациях, ускорять принятие врачебных решений и повышать качество и безопасность медицинской помощи.

Сейчас мы ищем Инженера данных (Data Engineer), который будет заниматься развитием и поддержкой инфраструктуры обработки и хранения данных, обеспечивать их качество, доступность и эффективное использование в аналитических и продуктовых задачах компании.

Чем предстоит заниматься:

• Разрабатывать, тестировать и поддерживать ETL/ELT-процессы для сбора, преобразования и загрузки данных из различных источников в корпоративное хранилище
• Проектировать и развивать архитектуру хранилища данных (DWH), оптимизировать схемы данных, выбирать форматы хранения и стратегии партиционирования
• Создавать и поддерживать витрины данных для аналитических и продуктовых команд
• Разрабатывать и поддерживать процессы обработки данных с использованием Apache Airflow
• Оптимизировать производительность SQL-запросов, контролировать использование ресурсов и эффективность хранения данных
• Реализовывать механизмы проверки качества и целостности данных, выявлять и устранять аномалии
• Настраивать мониторинг процессов обработки данных, оповещения о сбоях и механизмы автоматического восстановления
• Внедрять и поддерживать стратегии управления жизненным циклом данных
• Обеспечивать стабильную работу и доступность хранилища и витрин данных
• Поддерживать актуальность используемых библиотек и инструментов обработки данных в средах разработки, тестирования и эксплуатации
• Участвовать в проверке и оптимизации SQL-запросов совместно с аналитиками
• Документировать процессы обработки данных, их источники, преобразования и зависимости
• Взаимодействовать с командами разработки, аналитики и машинного обучения для решения задач, связанных с данными

Будем рады видеть в новом коллеге следующее:

• Опыт работы инженером данных (Data Engineer) от 2 лет
• Уверенное владение Python и SQL, опыт их практического применения для обработки и преобразования данных
• Опыт проектирования, построения и развития хранилищ данных (DWH)
• Практический опыт работы с Apache Airflow: разработка, настройка и поддержка DAG
• Понимание принципов построения ETL/ELT-процессов и организации потоков данных
• Знание подходов к моделированию данных, оптимизации SQL-запросов и повышению производительности хранилищ
• Понимание принципов обеспечения качества, целостности и доступности данных
• Умение самостоятельно разбираться в сложных технических задачах и находить оптимальные решения
• Ответственность, внимательность к деталям и готовность взаимодействовать с другими техническими командами

Будет плюсом:

• Опыт работы с большими объёмами данных и высоконагруженными системами
• Опыт настройки мониторинга и автоматизации процессов обработки данных
• Знакомство с инструментами контейнеризации и процессами CI/CD
• Опыт работы с данными для машинного обучения и аналитических систем
• Опыт работы в MedTech, HealthTech или с медицинскими данными

Мы предлагаем:

• Работу в аккредитованной IT – компании, где налажена прямая связь с командой, руководителем и менеджментом компании в концепции полного доверия и максимальной прозрачности
• Официальное трудоустройство по ТК РФ и предоставление всех обязательных гарантий
• Конкурентный и полностью официальный уровень дохода
• Стандартный отпуск 28 календарных дней и дополнительно еще 3 календарных дня за ненормированный рабочий день
• Программу ДМС после прохождения испытательного срока в лучших клиниках, а также возможность подключить близких родственников к корпоративному страхованию на льготных условиях
• Удобную и современную технику для эффективной работы