Мы ищем опытного Data Engineer в команду СберБизнеса с фокусом на задачи по созданию и поддержке решений обработки больших данных, интеграции сервисов банка в бизнес-процессы, а также многие другие интересные челленджи, которые позволят вам покорить новые профессиональные высоты, а нам вместе с вами – максимизировать доход банка.
Чем занимаемся:
· Построение промышленных рекомендательных систем для персонализации контента и продажи продуктов экосистемы и продуктов банка.
· Ранжирование предложений компаниям для их приоритизации с учетом контактных политик банка;
· Построение аналитической отчетности.
Обязанности
· Создавать и поддерживать ETL-процессы загрузки данных для применения в ML/AI-моделях и дата-аналитике;
· Разрабатывать витрины с предагрегатами и витрины с аналитическими признаками на основании потребностей продуктовых команд;
· Проектировать витрины для мониторинга моделей машинного обучения;
· Создавать инструменты для автоматизации рутинных задач, связанных с обработкой данных
· Развивать модель данных;
· Рефакторить текущие процессы, предлагать лучшие практики работы с данными.
Требования
· Опыт работы Data Engineer от 1 года;
· Отличное знание Scala/Python (или\или)
· Опыт разработки ETL-процессов, построения хранилищ и витрин данных
· Знание SQL на экспертном уровне (аналитические функции, подзапросы, хранимые процедуры, оптимизация запросов)
· Опыт контейнеризации приложений и работы с Docker
· Опыт работы с инструментами Atlassian Confluence, Jira, Git (Bitbucket), Jenkins, Nexus
· Опыт работы с большими объемами данных с использованием стека технологий Big Data (Hadoop, Spark, Hive/Impala, Hue), понимание принципов работы модели распределенных вычислений будет преимуществом
Условия