Дата-инженер в команду цифровых решений

О нас:

Мы в «АйДи Инжиниринг» создаём цифровые продукты для сложных инженерных задач. В нашей команде ценят профессионализм, инициативу и стремление делать качественный продукт. Сейчас мы ищем дата-инженера, который поможет нам развивать инфраструктуру данных.

Чем предстоит заниматься:

• Принять текущую инфраструктуру, провести её аудит и предложить улучшения;
• Проектировать и разрабатывать ETL/ELT-процессы на Python и Apache Airflow для сбора данных из разных источников;
• Проектировать архитектуру хранилища в Greenplum, работать с витринами данных и оптимизировать тяжёлые SQL-запросы;
• Собирать дашборды в Apache Superset вместе с внутренними заказчиками, чтобы данные работали на бизнес;
• Настраивать мониторинг и алертинг для бесперебойной работы пайплайнов.

Наш стек:

Python, SQL, Apache Airflow, Greenplum, Apache Superset, Docker (Linux).

Наши ожидания:

Мы ищем инженера с опытом от 3 лет, который не боится брать задачи в работу и доводить их до результата.

Ключевые навыки:

• Языки: уверенный Python (Java — плюс);
• Базы данных: глубокое знание SQL, опыт с Greenplum (или аналогами: ClickHouse, PostgreSQL на больших объёмах);
• ETL/Хранилища: опыт работы с Airflow, понимание принципов построения DWH/Data Lake;
• Надёжность: опыт настройки мониторинга (Zabbix, Graylog, Superset), обработки ошибок и тестирования;
• Инфраструктура: уверенное знание Linux, опыт с Docker и Kubernetes будет преимуществом.

Личные качества:

• Продуктовое мышление: вы понимаете, что данные нужны для решения бизнес-задач;
• Самостоятельность: умеете работать автономно и брать на себя ответственность за результат.

Что мы предлагаем:

• Интересные задачи на стыке инженерии и бизнеса;
• Возможность влиять на развитие инфраструктуры данных;
• Работу с современным стеком технологий;
• Официальное трудоустройство и комфортные условия работы в офисе в центре Санкт-Петербурга.

Будем рады познакомиться, если вам близко такое видение работы с данными!