Data Engineer

Проектирование и разработка ETL/ELT-процессов для интеграции данных из CRM в ERP через Kafka.

Работа с архитектурами Data Warehouse (DWH), Data Lake, Data Virtualization.

Реализация и поддержка batch и streaming-процессов обработки данных.

Оптимизация хранения и передачи данных для минимизации задержек и повышения качества.

Настройка мониторинга потоков данных и обеспечение их безопасности.

Взаимодействие с ИТ, аналитиками и владельцами данных для определения требований.

Знание ODBC, HTTP, JSON, XML, OData и популярных способов аутентификации.

Опыт написания кода на одном из языков высокого уровня (Python, Java и др.).

Понимание принципов кеширования данных.