Middle+ Data Engineer (Java, Hadoop)

Мы в поиске Data Engineer(Java). Команда занимается разработкой собственной NoSQL базы данных, которая отличатся высокой производительностью в своем классе. Для успешной работы над данным продуктом требуется глубокое понимание логики функционирования баз данных. В рамках проекта необходимо будет развивать существующие тесты и создавать новые для покрытия нового функционала. Для тестирования используются технологии Java и Bash.

Чем предстоит заниматься:

• Разрабатывать и поддерживать тестовую инфраструктуру для собственной высокопроизводительной NoSQL базы данных.

• Создавать и дорабатывать автотесты на Java и Bash для проверки нового и существующего функционала.

• Участвовать в организации репликации данных между исходными системами и распределённым кластером.

• Настраивать и оптимизировать индексирование данных для ускорения обработки запросов в реальном времени.

• Анализировать производительность, выявлять узкие места и предлагать улучшения.

Для нас важно:

• Уверенные знания Java (коллекции, условия, циклы, структуры данных).

• Владение Bash и утилитами командной строки (grep, tail, sed, awk и др.).

• Понимание принципов CI/CD и автоматизации процессов тестирования.

• Базовые знания Python — как плюс.

• Понимание экосистемы Hadoop и её компонентов (Solr, Hive, HBase, Spark, ZooKeeper, Oozie, Camel).

• Опыт работы с реляционными или нереляционными БД и интерес к глубинным механизмам их функционирования.

Главный принцип SkillStaff - Выбирай!

ЭКСПЕРТИЗА. Делай выбор в пользу проектов с разным уровнем сложности и экспертных команд, где можно работать с лучшими специалистами и обмениваться опытом.

РАЗНООБРАЗИЕ ПРОЕКТОВ. Выбирай из сотен компаний и проектов то, что интересно и полезно для твоего роста. SkillStaff помогает реализовывать ежегодно порядка 500 различных ИТ-проектов для крупного бизнеса.

КОМФОРТ. Создавай идеальные условия для своей работы: удаленный формат работы на территории РФ.