Проект:
Мы занимается развитием инструментов автоматизации разработки витрин данных. Один из основных наших продуктов – ядровой java-фреймворк для формирования данных в Hadoop через Spark. При помощи нашего инструмент 30+ команд и уже создали 170+ витрин, 2000+ потоков загрузки данных на платформе нашего блока размером 1200+ нод, 40 000 ядер и 25+ петабайт данных.
Требования: - Опыт работы с Hadoop/Spark/Java
- Глубокое знание SQL (обязательно: джойны, оконные функции, базовые запросы)
- Понимание процессов тестирования ПО и ЖЦ разработки
- Опыт проведения тестирования в СУБД /распределенных системах/хранилищах данных
- Понимание принципов построения хранилищ данных (витрина, историчность, модели хранения, ключи и т.д)
- Умение самостоятельно разбираться в проекте и искать пути решения проблем
- Опыт и понимание процесса разработки и тестирования витрин данных
- Опыт встраивания ИИ в процессы разработки ПО
- Опыт программирования на Python
- Опыт работы с Jenkins и другими средствами автоматизации CI/CD
Должностные обязанности:
- Развитие и автоматизация функционального, регрессионного, нагрузочного тестирования фреймворков и библиотек на стеке spark+hive+Java
- Проработка и документирование тестовых сценариев
- Анализ требований и кода, выявление дефектов, уязвимостей, неоптимальной работы spark заданий
- Взаимодействие с разработчиками и аналитиками
Условия:
- Конкурентная заработная плату (по итогам технического интервью);
- Оформление в соответствии с ТК РФ;
- Работа в дружной и профессиональной команде;
- Удаленный формат работы.