Data Engineer

Компания Axenix (ранее Accenture) продолжает работу на российском рынке и аккумулирует 30-ти летний консалтинговый опыт внедрения инновационных решений.
Наша экспертиза - стратегия и консалтинг, технологии и операции, направленные на цифровизацию бизнеса.

Практика Applied Intelligence включает консультационные услуги по Data-driven трансформации, услуги по разработке корпоративных хранилищ и фабрик данных, включая Big Data / Data Lakes, автоматизации отчетности и услуги по продвинутой аналитике, машинному обучению и искусственному интеллекту.

Мы помогаем перестраивать бизнес, добиваясь максимальной эффективности, позволяя нашим клиентам решать самые сложные задачи.

Можно выбрать удобный формат работы - офис, гибрид или удаленный.
В России у нас есть офисы в Москве, Санкт-Петербурге, Твери, Краснодаре, Ростове-на-Дону.

Сейчас мы в поиске Инженера данных.

Обязанности:

• Разрабатывать и оптимизировать Spark-пайплайны для обработки данных в масштабе (200+ млн строк ежедневно)
• Настраивать хранение и доступность данных в DWH
• Автоматизировать интеграцию данных: продажи, акции, цены, остатки, погода, календари
• Работать в связке с Data Science-командой, обеспечивая стабильный и качественный поток данных для моделей
• Участвовать в развитии платформы прогнозирования спроса, делая её более надёжной, масштабируемой и удобной

Стек:

• PySpark{2,3} / Spark SQL
• Hadoop / Hive / Trino / S3 / Clickhouse / Postgres/ Greenplum
• Airflow
• Python3
• Docker, YARN / k8s
• Pytest