Инженер данных/Data engineer

Привет! Мы команда единомышленников и профессионалов СтандартПроект, создаём уникальные, востребованные и современные IT решения в двух ключевых направлениях: фото\видео фиксации и распознавании лиц. У нас огромный опыт перевода процессов в цифровой мир. Мы участвуем в обеспечении бесперебойного функционирования государственных информационных систем, а наши проекты обеспечивают безопасность по всей территории России.

✔️ Резиденты Сколково
✔️ ИТ-компания, аккредитованная Министерством цифрового развития, связи и массовых коммуникаций Российской Федерации

Сейчас у Вас есть возможность присоединиться к команде Big Data в роли Data engineer

ЧЕМ ПРЕДСТОИТ ЗАНИМАТЬСЯ:

• Создавать сервисы на Python, например: Многопоточный REST API На Flask, или автоматизировать выгрузку из базы (SQL) в другую базу или FTP, с попутным преобразованием (ETL)
• Создавать, планировать и мониторить ETL-процессы с помощью Apache Airflow
• Анализировать функционирование промышленных сервисов - выявлять узкие, проблемные места
• Работать с Docker контейнерами
• Внедрять и настраивать CDC (Change Data Capture) для синхронизации данных между различными хранилищами в реальном времени с использованием Apache Kafka (например, из PostgreSQL в ClickHouse)
• Организовывать хранение, ускорение поисков в векторных БД (Qdrant, Milvus или OpenSearch)
• Создавать поддерживающий код и писать документацию

Требования:

• Уверенное владение Python и SQL
• Умение работать с Docker контейнерами и Apache Airflow
• Опыт работы с большими данными

Приветствуется:

• Опыт промышленной работы с Kafka
• Понимание устройства CDC (Debezium) и умение настраивать коннекторы
• Опыт работы с как минимум с одной векторной базой данных (Qdrant, Milvus, OpenSearch с k-NN плагином) или готовность быстро погрузиться
• Опыт работы с реляционными БД: PostgreSQL (проектирование схем, оптимизация запросов)
• Умение проектировать схемы данных с учетом требований к производительности и масштабируемости
• Понимание архитектуры и принципов работы ClickHouse

МЫ ПРЕДЛАГАЕМ:

• Официальное трудоустройство;
• Достойную зарплату, ежемесячные и годовые премии;
• Корпоративную программу питания в офисе - завтраки, обеды и ужины;
• Полис ДМС;
• Обучение за счёт компании;
• Гибкое начало работы (старт работы 08.00 – 10.00);
• График работы: 5/2, СБ и ВС, праздники - выходные дни;
• Формат работы: офис первые 3 месяца, далее офис или гибрид;
• Комфортный офис в стиле Loft в БЦ Фабрика Станиславского, находится в 10-ти минутах пешком от ст. метро Таганская;
• Программу адаптации, наставничество, план развития для каждого сотрудника;
• Абонементы на фитнес/массажи/йогу, если будешь заниматься спортом вместе с нами;
• Корпоративный мерч;
  А также тебя ждёт:
• Интересная предметная область и сложные технические задачи, действительно уникальный опыт, который мало где можно получить;
• Работа над реальными проектами, которые на слуху у всех, в стабильной и активно развивающейся IT-компании, где нет бюрократии, и все сотрудники знают друг друга в лицо;
• И конечно, регулярные корпоративные мероприятия (настолки, квесты и т.д.), выездные корпоративы с крутыми активностями, подарки на НГ детям сотрудников и другие мероприятия для поддержания шикарного настроения.