Lead Data Engineer (Big Data)

Описание

Локация: Москва (комбинированный формат)КомпанияVK Видео — крупнейший российский видеосервис, которым ежедневно пользуются десятки миллионов людей.Что делатьРазрабатывать и поддерживать пайплайны обработки и доставки данных для ML и аналитики.Проектировать, собирать и оптимизировать аналитические витрины.Выполнять ad-hoc запросы, выгрузки и проводить отладку данных.Сбор и анализ требований к данным.ТребованияОпыт работы с Airflow, Spark, Hadoop и ClickHouse.Знание Python (базовые алгоритмы, ООП, работа со сложным кодом).Понимание принципов параллельных вычислений на кластере.Владение Git и опыт командной разработки (Code Review).