Senior Data Engineer

Any (ранее DIGINETICA) — лидер в области персонализации пользовательского опыта, продуктов для навигации и выбора товаров в e-commerce. Мы развиваем продукты для топовых онлайн-ритейлеров, в том числе Самокат, Золотое Яблоко, Билайн и многих других. Всего в портфеле компании 700+ крупнейших онлайн-ритейлеров в России, Беларуси, Кзахстане, и регионе MENA.

Наш флагманский продукт AnyQuery — лидер рынка в сегменте персонализированного поиска товаров. Также мы развиваем продукты по персонализации и товарным рекомендациям AnyRecs, систему поиска по изображениям AnyImages, продукт для саммаризации отзывов AnyReviews и инструмент для увеличения органического трафика в интернет-магазинах AnyCollections.

C 2022 мы входим в часть экосистемы Т-Банк и в рамках совместных активностей и синергии развиваем ряд совместных сервисов для миллионов пользователей аудитории банка и наших клиентов.

Мы расширяем команду и ищем Senior Data Engineer, с которым сможем выстроить новый подход в работе с данными.

Почему у нас интересно работать:

• Влияние: ключевая роль в архитектуре и надежности дата-платформы.
• Рост: постоянные нетривиальные задачи из-за роста бизнеса и объёмов данных.
• Технологии: современный стек без излишней бюрократии, возможность предлагать решения.
• Синергия: участие в совместных проектах с Т-Банк и масштабирование решений на миллионы пользователей

Наши задачи:

• Провести аудит существующих дата-пайплайнов, выявить узкие места и точки отказа.
• Спроектировать и реализовать целевую архитектуру загрузки, трансформации и хранения данных под высокую нагрузку.

• Разработка и внедрение единых стандартов и лучших практик, включая стандартизацию процессов ETL/ELT, управление схемами данных и ведение документации.

Наш технологический стек:

• Языки: Java 17, Python, Scala
• Хранилища и работа с данными: PostgreSQL, ClickHouse, Redis, S3, Kafka, Spark, ElasticSearch, Airflow
• Мониторинг и алертинг: Prometheus, Grafana, Micrometer, datadog tracing
• Логирование: ELK
• BI и аналитика: DataLens

Мы ожидаем:

• Отличное знание Spark и одного из языков Scala/Java.
• Способность проектировать архитектуру под высокую нагрузку и масштабировать решение.
• Глубокое понимание ETL/ELT-процессов и архитектуры дата-систем.
• Опыт профилирования и оптимизации производительности пайплайнов.
• Уверенные навыки SQL и работы с хранилищами данных (ClickHouse, PostgreSQL, S3 или аналоги).
• Будет плюсом опыт работы с Airflow или аналогами, и настройка мониторинга/алертов.

Почему нужно идти к нам?

• Команда Any — это 150+ профессионалов, создающих инновационные решения в тандеме с командой Т-банк;
• гибкий график работы, возможность полностью удаленной работы или работа из офиса Т-Банк в Москве (в офисе есть спортзал, бесплатные завтраки и обеды, зоны для отдыха, медитации и другие классные активности);
• полностью белая заработная плата, оформление по ТК c первого дня;
• мы аккредитованная IT-компания со всеми соответствующими льготами;
• мы также заботимся о твоем метальном здоровье предлагаем скидки на услуги сервиса "Ясно";
• возможность изучать английский по корпоративной программе совместно с "Skyeng";
• даем возможность и поддерживаем профессиональный и карьерный рост. Культивируем обмен опытом и регулярные воркшопы от разных команд.