Data Engineer в команду CDO B2C

Описание

Команда CDO B2C в поиске Data engineer в сфере управления данными и data-продуктами. Наша команда отвечает за управление всеми данными B2C сегмента клиентов Сбера. Мы уже трансформировали подход к управлению данными, построили единый слой детальных данных и продолжаем развивать его актуальность и полноту. Так же перед нами стоят амбициозные задачи построения единого слоя агрегатов и фичей B2C, реализация всего тракта поставки данных в RealTime и внедрения нового стека технологий, что позволит создать единую точку правды для упр. отчетности, моделей и фронтальных систем, а так же капитализировать данные за счет их многократного переиспользования.

Обязанности

* разрабатывать DWH/DataLake/LakeHouse * организовывать поставки данных в RealTime/NRT/Batch * проводить код-ревью других разработчиков * оптимизировать ETL * внедрять новые технологии/новые стеки в существующие решения * повышать актуальность данных * снижать latency доступа к данным * разрабатывать и валидировать архитектуру данных

Требования

* наличие высшего технического образования * знание SQL (join, CTE, оконные функции, фреймы и др.) * опыт работы с Hadoop, Spark, Iceberg/Paimon, S3 * опыт работы с Kafka и другими брокерами * опыт работы с оркестраторами (например, Airflow) и CI/CD * навыки построения архитектуры данных (например, Data Vault, Инман, Кимбалл и др.) и кратной оптимизации ETL * практическое знание python на уровне разработки ETL **будет преимуществом** * практическое знание java/scala * опыт создания и защиты архитектуры данных * опыт разработки solution-архитектуры data-продуктов

Условия

* офисный формат работы * годовой бонус и ежегодный пересмотр * расширенный ДМС с первого дня + стоматология и льготное страхование для семьи * корпоративный университет Сбера, внутренняя образовательная платформа, участие в IT-конференциях * офис на Кутузовской с зонами отдыха и спортзалом * льготная ипотека в Сбере, корпоративная пенсионная программа, подписка СберПрайм+, скидки от партнеров.