Data Engineer

Команда проекта работает над продуктом Аналитическое приложение ЦУНДО, АС для формирования и управления отчетностью подразделения ЦУНДО (Центра управления наличного денежного оборота).
Состоит из Базы данных GreenPlum и приложения на Java.

Твои задачи:

• Разрабатывать ETL ПО: витрины данных (Scala + Spark), а также интеграционные потоки с использованием kafka, хранилища данных на Postge и API методов
• Искать возможности оптимизации, повышения скорости расчета, эффективности использования вычислительных ресурсов
• Повышать стабильность работы приложений, анализ типовых ошибок и возможных рисков, развивать системы логирования, её полноту и информативность для последующей промышленной эксплуатации, при необходимости участвовать в решении возникающих при эксплуатации инцидентов
• Развивать систему контроля качества, автотестов
• Agile работа в тандеме с аналитиком данных, который является носителем ТЗ на разработку
• Самостоятельное осваивать и соблюдать стандарты разработки (описание в Confluence)
• Оформлять релизную документацию – паспорт релиза, чек-листы
• Также у команды есть задачи, связанные с развитие ИИ агентов на этапе зарождения направления

Что мы ждем от тебя:

• Опыт работы в роли Разработчика от 3 (трех) лет за период с 2018 г. по
  настоящее время в проектах по разработке и/или модификации и/или внедрению
  ПО с использованием инструментов и технологий GreenPlum
• Навыки разработки витрин данных на GreenPlum, Posgtres (SQL/PSQL, MPP – архитектура, технология дистрибуции, ролевая модель)
• Опыт оптимизации производительности SQL запросов (план запроса, индексы, дистрибуция, full scan)
• Опыт с ETL инструментами (Informatica PowerCenter)
• Знание экосистемы Hadoop (HDFS, Spark, Hive, Hue, Yarn)
• Система контроля версий Bitbucket и DevOps инструментарием (Jenkins, Nexus)
• Опыт командной разработки с использованием Confluence, Jira
• Опыт работы, как в каскадных (waterfall), так и в гибких методологиях (Agile

и/или DevOps и/или Scrum) разработки

Что мы обеспечиваем:

• Внутренние семинары, митапы, мы очень любим учиться новому
• ДМС со стоматологией для сотрудников и скидку на покупку ДМС для ближайших членов семьи
• Технику для комфортной работы
• Сессии профессионального развития персонала, результатом которой является план индивидуального развития каждого сотрудник