Data Engineer (Senior)

USETECH

Data Engineer (Senior)

Описание вакансии

Юзтех – группа аккредитованных ИТ-компаний полного цикла разработки с многолетней экспертизой в передовых технологиях: DWH, BigData, AI/ML, Blockchain, BI, предиктивная аналитика, цифровые двойники производства и рисков.

ГК Юзтех является технологическим партнером таких компаний, как Mail.ru, 2Gis, НЛМК, Еврохим, Go Invest, Альфа-Банк, Сбер, ВТБ, МКБ, Самолет Девелопмент, Х5 Group, Газпромнефть, Лемана Про, Ситилинк, Ланит, IBS. Также, ГК разрабатывает собственные IT-продукты (Usebus, Octopus, Тил Эйчар) и флагманские проекты, которыми пользуется 70% населения страны.

Мы приглашаем Senior Data инженера присоединиться к нашей команде

Задачи:

  • Разработка и поддержка ETL-процессов: извлечение (Extract), трансформация (Transform) и загрузка (Load) данных из различных источников в DWH с использованием инструментов Airflow и Informatica PowerCenter.

  • Написание и оптимизация сложных SQL-запросов в GreenPlum и Oracle, включая PL/SQL-скрипты для работы с таблицами объемом в десятки миллиардов записей.

  • Анализ и рефакторинг чужого кода ETL, а также проектирование новых пайплайнов на основе теорий СУБД и лучших практик ETL.

  • Интеграция Python и PySpark для обработки больших данных, автоматизации задач и повышения производительности процессов.

  • Мониторинг, отладка и обеспечение надежности ETL-джобов, включая обработку ошибок, валидацию данных и оптимизацию под высокие нагрузки банка.

  • Сотрудничество с аналитиками и бизнес-командами для понимания требований к данным и оперативного устранения проблем в DWH.

Мы ожидаем:

1) Опыт работы разработчиком ETL - не менее 2х лет

2) Отличное знание SQL, продвинутый навык разработки в GreenPlum и Oracle, умение оптимизировать sql-запросы, базовое знание PL/SQL

3) Понимание теорий СУБД и ETL процессов

3) Умение разбираться в чужом коде

4) Опыт работы с ETL инструментами (AirFlow, Informatica IPC)

5) Базовый навык разработки в Airflow,Informatica Power Center

6) Опыт работы с большим объемом данных (таблицы с десятками миллиардов записей)

7) Опыт работы с Python, PySpark;

Мы предлагаем:

  • Карьерную и профессиональную возможность в стабильной, аккредитованной ИТ-компании

  • Расширенный полис ДМС со стоматологией, корпоративный психолог

  • Удаленную работу и гибкий график

  • Необходимую технику для комфортной работы

  • Обучение, сертификацию, Usetech English Club – онлайн изучение английского

  • Доступ к Корпоративной библиотеке и к Корпоративному университету

  • Внутрикорпоративные профильные коммьюнити

  • Заботу о детях сотрудников: корпоративные скидки, подарки, детские дни

  • Геймифицированную программу лояльности: поверь, ты будешь восторге от нашего корпоративного магазина!

  • Корпоративную жизнь: мы много работаем и классно отдыхаем .

Навыки
  • ETL
  • PySpark
  • Apache Airflow
Посмотреть контакты работодателя

Похожие вакансии

Хотите оставить вакансию?

Заполните форму и найдите сотрудника всего за несколько минут.
Оставить вакансию