Мы в поиске инициативного и ответственного специалиста для работы на позиции Data engineer.
В этой должности вы будете: - Разрабатывать процессы транспорта (ETL/ELT/CDC), трансформации и контроля качества данных;
- Участвовать в разработке хранилищ данных и интеграционных шин;
- Обеспечивать отказоустойчивость, масштабируемость, безопасность и непрерывную работу существующих и разрабатываемых решений;
- Обеспечивать мониторинг производительности и доступности существующих и разрабатываемых решений;
- Выполнять рефакторинг и оптимизацию существующих решений;
- Участвовать в определении целевого стека Data-платформ и его внедрении;
Примеры реальных задач, которые ждут вас:
- Разработка ETL/ELT/CDC процессов (Apache Airflow, Apache Spark, Oracle Golden Gate, Debezium);
- Рефакторинг текущих процессов транспорта данных с пакетной на потоковую передачу;
- Аудит существующих DAG реализованных на Apache Airflow с их последующим рефакторингом;
- Участие в реализации CDC Oracle-nonOracle;
- Рефакторинг текущего процесса добавления объектов в CDC/ETL
Мы бы хотели видеть у вас: - Опыт работы на позиции Data Engineer или аналогичной роли от 2 лет;
- Опыт работы с PostgreSQL;
- Уверенное владение SQL для написания запросов, нацеленных на работы с большими объёмами данных;
- Уверенные знания Python, Pandas, Numpy;
- Опыт разработки и поддержки ETL/CDC процессов;
- Опыт работы с инструментами: Apache Airflow, Apache Kafka, Apache Spark, Jupyter;
- Знание принципов проектирования хранилищ данных и работы с большими объёмами данных;
- Уверенное знание и опыт работы с REST API и форматами данных JSON, XML;
- Умение работать в команде, высокий уровень ответственности и нацеленность на результат;
- Логическое мышление, пытливый ум, грамотная речь, самоорганизация и высокие коммуникативные навыки;
Плюсом будет:
- Знание основ DevOps (Linux, Docker);
- Опыт работы с БД Oracle;
- Опыт работы с Oracle GoldenGate;
- Опыт работы с BI инструментами;
- Опыт работы с Prometheus, Grafana;
- Высшее образование (математическое, инженерное или в сфере информационных технологий);
Вы гарантированно получите:
- Работу с вовлеченным коллективом;
- Достойную заработную плату (определим на собеседовании);
- Удаленный, гибридный или очный формат работы;
- Корпоративный ДМС;
- Возможность роста посредством реализации индивидуальных программ развития;
- При желании трудоустройство в аккредитованную ИТ-компанию;
Мы поддерживаем и обеспечиваем:
- Программу адаптации;
- Программу движения по карьерной лестнице с необходимым для этого обучением и практикой;
- Минимум бюрократии;
- Программу рекомендаций, чтобы вы могли работать со своими друзьями и получали за это бонусы;
Этапы найма:
Мы четко знаем что хотим и ценим ваше и своё время, поэтому будет только:
- Телефонное интервью с HR менеджером;
- Собеседование с руководителем;
Решение принимаем быстро :)