Разработчик инфраструктуры больших данных в Автономный транспорт

Мы создаём технологию автономного транспорта, способного передвигаться по городу без участия водителя. Во время каждого проезда автопилот генерирует большое количество данных: записи с камер, лидарные облака, GPS-логи и множество другой информации, которую необходимо изучить, обработать и применить для дальнейшего развития технологии.

Команда данных занимается обработкой и хранением всей информации, которая поступает напрямую от нашего флота автономной техники, и предоставляет доступ к ней. Мы работаем с действительно большими данными, и нашей платформой пользуются многие другие команды.

Какие задачи вас ждут

Проектирование архитектуры хранения и обработки больших данных
Автономный транспорт в результате своей работы создаёт большое количество данных, которые нужно эффективно обрабатывать, хранить и доставлять пользователям в удобном для них формате. Ежемесячно наше хранилище прирастает более чем на 3 ПБ только за счёт новых логов. Одна из ключевых задач команды — проектирование архитектуры для хранения сырых данных, а также реализация отказоустойчивой системы без потери данных, обеспечивающей высокий уровень доступности для наших пользователей.

Развитие инфраструктуры метаданных
Для навигации в большом объёме сырых данных необходимо использовать метаинформацию, которую мы получаем как через настройку автоматических постпроцессингов, так и в результате ручной разметки данных, которую выполняют аналитики и асессоры. Вам предстоит анализировать потребности пользователей и на основе результатов анализа планировать и реализовывать инфраструктуру метаинформации, которая обеспечит быстрый поиск и доступ к данным.

Разработка бэкенд-сервисов
Для взаимодействия с пользователями данных мы используем бэкенд-API-сервисы на языке Golang с использованием gRPC и Swagger. Вам предстоит дорабатывать существующие сервисы и создавать новые с нуля: от сбора требований до запуска в эксплуатацию, с дальнейшим сопровождением и обеспечением высокой доступности.

Мы ждем, что вы

• Разрабатывали нагруженный бэкенд не меньше трёх лет
• Работали с SQL и реляционными базами данных
• Разбираетесь в распределённых системах
• Разрабатывали для Linux

Что мы предлагаем

- Здоровье:

Расширенная медицинская страховка начинает работать с первого месяца в Яндексе. В неё входят стоматология, ежегодные чекапы, неотложная помощь за рубежом, лечение критических заболеваний, в том числе онкологии, и страхование от несчастных случаев.

А также: психотерапия в офисе или онлайн-сервисах; лазерная коррекция зрения через год работы; ведение беременности и роды — через два года.

Страховка для родственников по системе 80/20. Мы оплачиваем 80% стоимости ДМС для детей и супругов, вы — остальные 20%.

- Рост и развитие:

В Яндексе есть всё, чтобы постоянно развиваться и учиться новому: внутренняя образовательная платформа, менторство и программы для начинающих и опытных руководителей.

Также мы оплачиваем участие в профильных конференциях — как в качестве спикера, так и в качестве участника.

Кроме того, в Яндексе есть внутренние проекты, где наши сотрудники делятся экспертизой, обсуждают сложные темы и разбирают кейсы своих проектов.

- Спорт:

Во всех крупных офисах Яндекса есть спортзалы со всем необходимым: тренажёрами, спортивным инвентарём, душевыми, шкафчиками для одежды и вещей. Можете заниматься самостоятельно, а можете с корпоративным тренером.

А также: бесплатные онлайн-тренировки с FITMOST; скидки в фитнес-клубах, бассейнах, студиях йоги, скалодромах и других местах.

В Яндексе есть спортивный клуб и много спортивных команд. У них есть свои лидеры, чаты, программы тренировок. А ещё они регулярно участвуют в забегах, триатлонах, «Гонке героев», футбольных и других соревнованиях.