Разработчик Hadoop

Привет!

Мы - ООО «Датаномика», решаем проблемы структурирования разнородных данных, которые сложно поддаются анализу, помогаем среднему и малому бизнесу, банкам, ритейлу использовать данные о клиентах для оценки конъюнктуры спроса и экономических показателей, помогаем повысить качество сервиса финансового планирования и аналитики для клиентов.

О проекте:

Проект реализации базовых витрин для брокерского обслуживания в крупном российском банке

Что входит в задачи:

• Разработка ETL процессов на стеке Hadoop;
• Разработка базовых витрин данных для брокерского обслуживания;
• Проведение тестирования на тестовых стендах перед передачей аналитику.

Требования:

• Опыт работы в роли разработчика за последние 2 (два) года в проектах по разработке и/или модификации и/или внедрению ПО с использованием инструментов и технологий Hadoop;
• Опыт работы с указанными инструментами по направлению Hadoop: HDFS, MapReduce, Yarn, Hadoop Common, Apache Tez, Apache Solr, Apache Pig, Sqoop и/или Flume, Apache Hive и/илиSpark SQL, Apache Kafka;
• Опыт работы с реляционными БД (Oracle DB и/или PostgreSQL и/или MySQL);
• Опыт оптимизации производительности SQL запросов (план запроса, индексы, дистрибуция, full scan);
• Опыт работы с инструментами машинного обучения Apache Mahout и/или Apache Spark MLLib;
• Опыт разработки API (REST);
• Опыт участия в оптимизации процессов сбора, первичная обработка и хранение большого объема данных из различных типов источников;
• Опыт интеграции инфраструктурных компонент c сторонними системами;
• Опыт оптимизации моделей хранения данных;
• Опыт командной разработки с использованием программных продуктов Confluence и Jira;

• Опыт работы, как в каскадных (waterfall), так и в гибких методологиях (Agile и/или DevOps и/или Scrum) разработки.

Мы предлагаем:

• Работа в ИТ-аккредитованной компании;
• Регулярное обучение и профильные конференции за счёт компании, современное оборудование для работы;
• Гибридный формат работы;
• Гибкий график работы;
• Официальная «белая» зарплата;
• Оформление с первого рабочего дня, полное соблюдение ТК РФ;
• Интересные, амбициозные задачи с достижимым результатом;
• Достаточную свободу действий, инструментарий и необходимые ресурсы.