Senior Data Engineer (Dubai onsite)

Мы ищем опытного инженера по данным со специализацией на Apache NiFi для работы в динамичной команде в Дубае. Если вы разбираетесь в построении и оптимизации сложных data flow-ов и имеете глубокие знания экосистемы Cloudera, вам к нам!

СТЕК проекта: Apache NiFi, Cloudera NiFi, Groovy

Необходимые знания и навыки:

•Английский язык B2 и выше;

•Опыт работы с Apache NiFi 3+ лет: разработка, управление и оптимизация сложных данных потоков (data flows) в production-среде;
•Практический опыт работы с Cloudera NiFi (CDP Data Flow) в корпоративной среде;
•Опыт миграции потоков NiFi;
•Глубокое знание Red Hat Enterprise Linux (RHEL);
•Навыки Groovy scripting для использования процессоров Execute Script и Invoke Scripted Processor;
•Понимание протоколов SSH/SFTP и опыт работы с процессорами (ListSFTP, FetchSFTP, PutSFTP);
•Опыт интеграции NiFi с MongoDB (процессоры GetMongo, PutMongo, QueryMongo);
•Опыт работы с Apache Kafka;
•Навыки работы с контроллер-сервисами: SSLContextService, DBCPConnectionPool, RecordReader/RecordWriter;
•Опыт Record-based обработки данных;
•Опыт развертывания и мониторинга NiFi в высокодоступных production-средах с использованием Prometheus/Grafana или Cloudera Manager.

Что вы приобретёте, присоединившись к нам:

• Достойную оплату труда;
• Официальное трудоустройство;
• Работа в команде профессионалов на проектах в области передовых технологий и инноваций;
• Современный офис в удобном районе Дубая
  работа в офисе в Дубае 3-4 дня в неделю — в офисе;
• Помощь с релокацией (при необходимости);
• Страховка.