Data Engineer (B2C)

Описание

ИТ B2C — самая крупная экосистема в Сбере. Нас более 8000 человек в 18 городах России. Мы занимаемся разработкой и развитием розничных решений, помогая сделать сервисы Банка доступнее, безопаснее и удобнее. Мы, команда офиса CDO B2C, строим платформу данных, которая обеспечивает быстрый, надежный и качественный обмен информацией между Сбером и компаниями экосистемы. Это основа для персонализированных предложений умных продуктов и эффективных бизнес-решений. Если тебе интересны большие данные, амбициозные вызовы, продукты, которые реально влияют на жизнь людей – давай делать это вместе!

Обязанности

* реализация ETL-пайплайнов для загрузки и обработки данных (включая DAG в Apache Airflow) * проектирование и разработка витрин данных на стеке Hadoop + Spark + Java/Scala * мониторинг и оптимизация процессов обработки данных * интеграция источников данных (базы данных, API, файловые хранилища) в настройка и администрирование Airflow для оркестрации workflows; * разработка и поддержка сопроводительной документации и спецификаций данных, развитие и поддержка базы знаний по вопросам работы с данными

Требования

* не менее 1 года работы в качестве Data Engineer * знание SQL на продвинутом уровне (аналитические функции, подзапросы, хранимые процедуры, оптимизация производительности), * опыт работы с большими объемами данных с использованием стека технологий Big Data (**Hadoop, Spark, Hive)** * знание основных понятий и концепций из области Data Warehousing, опыт разработки витрин данных. * хорошее знание Java/**Scala, Python**, включая библиотеки для работы с данными * знание Apache Airflow (создание DAG, настройка сенсоров, операторов)и Flink, опыт онлайн обработки данных является преимуществом * навыки администрирования Linux (развертывание, мониторинг, troubleshooting) * навыки работы с генеративными AI-моделями; опыт создания AI-агентов и использования их в работе будет преимуществом

Условия

* офисный формат работы * годовой бонус и ежегодный пересмотр * расширенный ДМС с первого дня + стоматология и льготное страхование для семьи * корпоративный университет Сбера, внутренняя образовательная платформа, участие в IT-конференциях * офис на Кутузовской с видом на набережную, зонами отдыха и спортзалом * льготная ипотека в Сбере до -7п.п, корпоративная пенсионная программа, подписка СберПрайм+, скидки от партнеров и сервисов группы компаний.