Data Engineer

Описание вакансии

Aston — аккредитованная аутсорсинговая IT-компания, работающая с 2007 года. Наш штат насчитывает 2500+ специалистов. Мы разрабатываем программное обеспечение и IT-решения в сферах Finance, Healthcare, eCommerce, IoT, Media, Big Data, ML и многом другом.

Предлагаем присоединиться в роли Data Engineer и работать над проектом заказчика.

Заказчик – это российское подразделение американской семейной компании одного из крупнейших производителей продуктов питания и кормов для животных. Компания работает на рынке России и стран СНГ с 1991 года.

Чего мы ждем от специалиста?

опыт работы в роли Data Engineer от 3-х лет;
экспертное владение SQL, глубокое понимание внутреннего устройства СУБД, продвинутая оптимизация SQL;
глубокое понимание Spark (Catalyst, Tungsten);
опыт работы с экосистемой Hadoop (YARN, Hive);
опыт работы с одним или несколькими оркестраторами (предпочтительно Airflow, также рассматриваются Prefect/Dagster);
опыт применения продвинутых техник оптимизации (CBO, AQE в Spark, оптимизация join'ов, борьба с data skew);
глубокое понимание форматов данных для больших объемов, опыт работы опыт работы с Parquet или Avro, Delta Lake, Iceberg;
опыт работы с инструментами для DQ;
опыт работы с системами логирования (ELK, Grafana Loki) и мониторинга (Prometheus, Grafana);
отличные коммуникативные навыки;
умение находить решения для сложных, нетривиальных проблем.

Будет плюсом:

опыт работы с Apache NiFi.

Что мы предлагаем?

Хорошая зарплата: уровень обсуждается индивидуально, есть доплаты за менторство и профактивности.
Развитие: долгосрочные проекты от российских заказчиков, возможность менять направления, прозрачная система Performance Review.
Комфорт и свобода: релокейт между офисами, выбор формата работы (удалённо, офис, гибрид), адаптация для новых сотрудников.
Обучение: доступ к корпоративному порталу, митапам, конференциям (и как гость, и как спикер).
Социальный пакет: ДМС со стоматологией, частичная компенсация спорта, бесплатный английский, оплачиваемый отпуск и больничные.
Корпоративная жизнь: тимбилдинги, детские праздники, внутренние мероприятия.