Аналитик данных в команду Big Data

Каждый день наши автономные машины и программные продукты генерируют терабайты ценных данных. Мы тщательно анализируем эти данные для совершенствования и тестирования нашего программного обеспечения. Сейчас мы ищем специалиста, который возьмёт на себя задачи по построению продуктовой аналитики: разработку дашбордов, отслеживание и анализ метрик эффективности автономных систем и продуктов, а также создание MVP-алгоритмов для расчёта и визуализации этих показателей. Ваша работа станет основой для принятия продуктовых решений и дальнейшего развития наших технологий.

Вакансия подразумевает работу с большими объёмами технических данных с использованием SQL, Spark и polars/pandas (в зависимости от объёма данных).

Примеры задач на первое время:

• Выстраивать коммуникацию с владельцами функций автономного вождения и продуктов;
• Разрабатывать на SQL/pyspark алгоритмы расчёта метрик для функций автономного вождения (например, качество удержания в полосе, качество локализации, дальность распознавания);
• Документировать разработанные алгоритмы;
• Проверять качество расчёта метрик после внедрения алгоритмов Data-инженерами;
• Визуализировать метрики в BI-системах.

Наш технологический стек:
Python (pandas, polars, pyspark), Spark, Dagster, S3, Clickhouse, Metabase, Superset.

Чем предстоит заниматься:

• Формирование выборок данных по техническим заданиям;
• Разработка MVP витрин данных;
• Визуализация данных;
• Проектирование и документирование алгоритмов расчёта метрик;
• Сбор требований к метрикам;
• Построение дашбордов.

Что мы ждем от кандидата:

• Хорошее знание SQL (на уровне джойнов и оконных функций);
• Был опыт анализа данных с использованием Python (Pandas/Polars);
• Опыт работы хотя бы с одной из BI сисетм (Metabase/Superset/Tableau/DataLens).

Будет плюсом:

• Опыт работы со Spark;
• Опыт работы с Clickhouse;
• Опыт работы с Airflow/Luidgi/Dagster.