Data Engineer в Data Lake (MedTech)
Описание
Локация: Москва, Киевская улица, 7к2. Формат работы: гибридный или на месте работодателя.КомпанияИНВИТРО — крупная MedTech-компания с аккредитованной дочерней ИТ-компанией.Что делатьИзучать сырые данные на источниках и в Storage.Проектировать и строить витрины данных в ClickHouse.Разрабатывать, модифицировать и масштабировать ETL/ELT-процессы для Data Mart.Разбирать и устранять сложные инциденты производительности в ClickHouse и PySpark.Взаимодействовать с командами Data Science, ML и аналитиками.Проводить код-ревью.ТребованияОт 3 лет опыта на аналогичной или схожей позиции.Практический опыт построения платформ данных с Apache Iceberg на S3-совместимых хранилищах или Hadoop.Уверенное владение Python, включая PySpark, и продвинутый опыт пакетной обработки больших объёмов данных в PySpark.Опыт проектирования таблиц и работы с ClickHouse.Отличное знание SQL и опыт оптимизации запросов под большие объёмы данных.Опыт разработки и оптимизации ETL/ELT-процессов.Опыт разработки и поддержки витрин данных для аналитики и бизнес-отчётности.Понимание принципов Data Lake и Data Lakehouse.Хорошо, если естьОпыт работы с Hive, Apache Airflow, Kafka и потоковой обработкой в Spark.Понимание принципов MLOps и Lakehouse.Опыт работы с кластером ClickHouse.Участие в проектировании и развитии архитектуры DWH и Data Lake.Понимание моделей данных Star/Snowflake, Data Vault и Anchor Modeling.Культура и преимуществаПолное трудоустройство по ТК РФ с первого дня в аккредитованную ИТ-компанию.ДМС с телемедициной, консультациями специалистов и психотерапевта; скидки до 50% на медицинские услуги для сотрудника и близких.Удалённый или гибридный формат работы и 3 дополнительных оплачиваемых выходных дня.Внутреннее и внешнее обучение, семинары и тренинги.Подарки к праздникам, корпоративные скидки и специальные предложения от более чем 800 партнёров.Корпоративные и спортивные мероприятия, профессиональные соревнования, конкурсы и возможности профессионального и карьерного роста.