Data Engineer (Hadoop)
Описание
Локация: Москва, офис работодателя — БЦ Даниловский форт, рядом с метро Тульская и Верхние котлы.
Компания
SberData — департамент по управлению данными Сбербанка, развивающий централизованное хранилище данных — Корпоративную аналитическую платформу объемом более 100 ПБ.
Что делать
Разбирать и решать инциденты на платформах и сервисах Spark, Kafka, Hive и Kubernetes.
Анализировать причины проблем, разрабатывать предиктивные меры и корректирующие действия.
Исследовать поведение систем, локализовывать дефекты и сопровождать установку патчей.
Взаимодействовать с разработчиками, бизнесом и второй линией поддержки.
Участвовать в приемо-сдаточных испытаниях прикладного программного обеспечения.
Консультировать бизнес-пользователей и вторую линию по вопросам работы с платформой.
Требования
Опыт работы Data Engineer или Support Engineer от 1,5 лет.
Уверенное владение SQL.
Опыт работы с СУБД Oracle, PostgreSQL или Teradata.
Знание клиент-серверных и микросервисных архитектур.
Понимание принципов построения интеграций через REST API.
Английский язык для чтения технической документации.
Хорошо, если есть
Опыт работы с Hadoop, Apache Hive, Spark и Kafka.
Знание Python для написания скриптов автоматизации.
Опыт создания дашбордов мониторинга в Grafana и Prometheus.
Опыт работы с Jira и Confluence.
Владение PSQL.
Понимание принципов функционирования хранилищ данных OLTP/DWH и систем хранения.
Культура и преимущества
Работа в офисе по полному графику.
Ежегодный пересмотр зарплаты и годовая премия.
Корпоративный спортзал и зоны отдыха.
Более 400 образовательных программ СберУниверситета для профессионального и карьерного развития.
Расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа.
Льготные финансовые и корпоративные программы, включая ипотечный дисконт, подписку Прайм и вознаграждение за рекомендации.