Data engineer (ClickHouse)

Вакансия открыта в инфраструктурном продуктовом стриме - Data Platform.

Мы в поисках Data Engineer.

От успешного соискателя мы ожидаем:

• Понимание архитектуры современных аналитических систем и принципов межсистемной интеграции;
• Опыт работы с ClickHouse на уровне middle +;
• Опыт работы с Python;
• Знание SQL на высоком уровне и опыт оптимизации запросов на какой-либо СУБД;
• Опыт работы с Apache Airflow;
• Опыт обработки данных на Spark/PySpark будет плюсом.

Чем предстоит заниматься:

• Разработка и сопровождение функциональности аналитического Online хранилища данных на базе ClickHouse;
• Оптимизация и рефакторинг существующих решений;
• Разработка и развитие платформенных компонентов;
• Построение ETL-процессов поставки данных с помощью Airflow;
• Участие в тестировании потоков с целью обеспечения их стабильной работы;
• Осуществление поддержки разработанных пайплайнов;
• Разработка технической документации.