Data Engineer (Big Data)

О компании

EvApps — IT-компания, разрабатывающая сложные цифровые продукты для бизнеса и госсектора. Работаем с российскими и зарубежными клиентами, развиваем IT-аутстаффинг с 2019 года. Обладатели золота Tagline Awards и лидеры Рейтинга Рунета.

Задачи

• Работа в продуктовой команде заказчика в формате аутстаффа.
• Проектирование, разработка и развитие решений для интеграции и обработки данных.
• Разработка и поддержка ETL-процессов и потоков данных.
• Работа с Hadoop, HDFS, Hive и другими компонентами Big Data-экосистемы.
• Работа с DWH, DataLake и реляционными базами данных.
• Разработка отдельных компонентов интеграционных решений на Java или Groovy.
• Написание и оптимизация SQL-запросов, анализ планов выполнения.
• Сборка, контейнеризация и деплой решений с использованием Docker и Rancher.
• Поддержка существующих решений, анализ и доработка чужого кода.
• Работа с архитектурными схемами и технической документацией.

Требования

• Опыт проектирования, разработки и поддержки интеграционных решений на Big Data-стеке.
• Практический опыт работы с Hadoop.
• Понимание устройства HDFS и форматов хранения данных.
• Опыт работы с Hive или другим хранилищем на базе Hadoop.
• Опыт работы с ETL-инструментами: Apache NiFi, Airflow, SAP BW, Talend, Informatica, SAS или аналогами.
• Понимание принципов построения и хранения данных в DWH и DataLake.
• Уверенное знание SQL: функции, индексы, анализ планов выполнения и оптимизация запросов.
• Опыт работы с PostgreSQL, Oracle, MySQL, MS SQL, DB2 или другой реляционной базой данных.
• Опыт программирования на Java или Groovy.
• Знание принципов ООП и умение разбираться в чужом коде.
• Опыт работы с Docker и Git через командную строку.
• Умение читать архитектурные схемы и работать с технической документацией.
• Готовность выйти на работу в максимально короткие сроки после получения оффера.

Будет плюсом

• Опыт деплоя решений в Rancher.
• Опыт администрирования Unix/Linux или Hadoop-кластера.
• Опыт работы с Yarn, Ranger, Spark и ZooKeeper.
• Знание Zabbix и Ansible.

Условия

• Аутстафф в сильной продуктовой команде.
• Офис в Туле или удалённая работа.
• Оформление по ТК РФ.
• IT-ипотека и отсрочка от армии.
• Компенсация спорта и обучения.
• Внутренние онлайн-мероприятия, корпоративные чаты и обмен экспертизой — даже в аутстаффе вы остаётесь частью нашей команды, а не «ресурсом на проекте».