Разработчик DWH

Мы строим платформу аналитической обработки больших данных. Она реализует Data-Driven Decision Making подход в управлении компанией - позволяет собирать разрозненные данные из множества источников и объединять их в единое информационное поле для принятия управленческих решений. Это сложный многокомпонентный продукт, основанный на свободно распространяемом ПО, и объединенный в единую экосистему. Наша задача - адаптация лучших Big Data практик для решения бизнес задач и оформление их в виде целостного продукта удобного для использования.

Миссия вакансии:

Разрабатывать предметно ориентированный фреймворк загрузки данных в Хранилище. Наращивать и делиться экспертностью с пользователями платформы.

Чем предстоит заниматься:

• Разработка ПО для создания аналитических решений на основе философии Data Mesh.

• Дизайн логических слоев и эталонных практик их использования.

• Проработка мульти-арендного/коммунального использования платформы.

• Автоматизация типовых операций обработки данных в хранилище.

• Документирование разработанных решений.

• Обучение проектных команд разработанным практикам.

• Помощь проектным командам в устранении инцидентов.

• Исследование новых технологий и практик для построения DWH.

Технологии и инструменты:

ETL/DBT Core: Kafka, Airflow.

Data Lake: HDFS, YARN, Zookeeper, Spark2.

DWH: Postgre SQL, Greenplum.

Monitoring: Prometheus, Grafana.

Security: Knox, Apache Ranger and KMS.

CI/CD & IaC: Gitlab, Jenkins, FlywayDB, Ansible.

Мы ожидаем от кандидата:

• Опыт разработки на промышленных БД от 3-х лет (Oracle/PostgreSQL/MS SQL и др.), или на Hadoop стеке.

• Опыт оптимизации запросов.

• Опыт построения архитектуры данных.

Будет плюсом:

• Знание Python/Java/Scala, или других современных ООП языков программирования на высоком уровне.

• Опыт с DBT.

• Опыт построения аналитических решений.

• Знание методологий построения хранилищ: Инмон, Кимбалл, Data Vault, Anchor model, Data Mesh.

• Опыт работы с MPP RDBMS: Greenplum, Teradata, Vertica, Clickhouse.

• Опыт работы с большим объемом данных (более 10 Тб)

• Знание ETL/ELT фреймворками: Airflow, Informatica, ODI, NIFI, Talend и др.

Мы предлагаем:

• Работу в аккредитованной ИТ компании, занимающейся разработкой софта, обеспечивающего непрерывность перевозочного процесса и эксплуатацией критической инфраструктуры РЖД.

• Белую, официальную зарплату, размер которой зависит от уровня regular / senior / lead.

• Дружный проактивный коллектив, собранный со всей России.

• Гибкое начало рабочего дня.

• ДМС после прохождения испытательного срока.

• Компенсация оплаты питания.

• Работа в г. Сочи (Адлерский р-н, возле Олимпийского парка).

• Комфортный офис со спортзалом на территории Олимпийского парка в 500 метрах от моря.

• Компенсацию переезда для иногородних.

• Лучшие экология и климат в России. Море и горнолыжный курорт рядом.

• Пробежки по набережной, клуб чаепития и др. интересности.

Отклик на данную вакансию (далее - вакансию) Соискателем посредством сайта «https://hh.ru/» или приложения «Поиск работы на hh» является действием самого Соискателя по предоставлению своего согласия в соответствии с Федеральным законом от 27.07.2006 г. № 152-ФЗ «О персональных данных» на осуществление со всеми указанными в резюме Соискателя на сайте «https://hh.ru/» персональными данными (а также с самим резюме Соискателя), которое включается в содержание отклика на вакансию, следующих действий:

- систематизацию;
- хранение;
- уточнение (обновление или изменение);
- использование;
- обезличивание;
- блокирование;
- уничтожение.

В целях возможного трудоустройства соискателя у оператора персональных данных:
ООО «Цифровые сервисы», ИНН 7727343405 адрес: 354340, Россия, Краснодарский край, ф.т. Сириус, пгт. Сириус, ул. Международная, дом 2/1, этаж 4, комната 405, которому настоящее согласие предоставляется без ограничения срока обработки этих персональных данных, но до момента отзыва Соискателем согласия на обработку этих персональных данных. Настоящее согласие на обработку персональных данных может быть отозвано Соискателем путем направления соответствующего заявления по адресу оператора: ООО «Цифровые сервисы», адрес: 354340, Россия, Краснодарский край, ф.т. Сириус, пгт. Сириус, ул. Международная, дом 2/1, этаж 4, комната 405.