Data Engineer

• Проектировать, развивать и поддерживать потоки данных для подготовки БД под задачи машинного обучения:
  1. Процессы интеграции данных из различных источников (реляционные БД, NoSQL, файлы, API);
  2. Обеспечение согласованности, чистоты и репрезентативности обучающих выборок.
• Интегрировать ИИ-модели в существующие информационные системы через:
  1. API, streaming (Kafka, RabbitMQ), bаtсh-интеграции;
  2. Синхронизацию с транзакционными и аналитическими базами (OLTP-OLAP).
• Участвовать в проектировании хранилищ признаков и систем управления версиями данных;
• Оптимизировать запросы и архитектуру хранения под высокую нагрузку от моделей (в т.ч. в реальном времени);
• Совместно с аналитиком и\или МL-инженером формировать единые условия между бизнес-логикой и ИИ.

• Опыт работы от 5 лет с аналогичными или схожими задачами\стеком;
• Уверенное владение SQL и знание как минимум одной из СУБД: PostgreSQL, MySQL, MS SQL Server;
• Имеете опыт работы с NoSQL: MongoDB, Redis, Cassandra;
• Понимаете архитектуры хранения данных: OLTP / OLAP /Data Warehouse и пр.
• Владеете Python и инструментами data engineering: Airflow/Prefect, dbt, pandas, SQLAlchemy, PySpark;
• Умеете проектировать и документировать схемы данных, АРl-контракты, процессы репликации и инкрементальной загрузки;
• Понимаете жизненный цикл МL-модели и как данные влияют на каждый этап (от сбора до мониторинга дрифта);
• Опыт интеграции ML-моделей в enterprise-системы (1C, СЭД и др.) будет плюсом;
• Высшее техническое образование (информатика, прикладная математика, физика и др.).

• Официальное трудоустройство по ТК РФ с конкурентной зарплатой (обсуждается индивидуально по итогам интервью);
• Возможность работать над эксклюзивными проектами, где твои идеи реально влияют на развитие компании;
• Материальные бонусы к праздникам и значимым событиям;
• Дружная команда настоящих экспертов, открытая к обмену знаниями и опытом;
• Комфортный офис в историческом центре Петербурга (м. Чернышевская) с уютной кухней, бесплатным кофе/чаем и насыщенной корпоративной жизнью;
• График: 5/2 с 9:00 до 18:00 (офисный формат), возможно гибкое начало рабочего дня, после испытательного срока гибрид обсуждается.

Готовишься к отклику?
В сопроводительном письме кратко расскажи о самых интересных проектах, в которых ты участвовал, и укажи ожидаемую заработную плату — мы ценим честность и профессионализм!

Стань частью чего-то выдающегося — присылай резюме уже сегодня!