Data Engineer

Описание

ИТ B2C — самая крупная экосистема в Сбере. Нас более 8000 человек в 18 городах России. Мы занимаемся разработкой и развитием розничных решений, помогая сделать сервисы Банка доступнее, безопаснее и удобнее. Ждем именно тебя! Мы команда штабной аналитики Юнита Цифровая Бизнес Платформа, отвечаем за клиентскую аналитику всех b2c – приложений СБЕР, включая самое большое по аудитории в России – СБОЛ.  Наша цель – обеспечивать продуктовые команды Юнита качественными данными и аналитическими инсайтами для принятия взвешенных data-driven решений. Мы анализируем поведение пользователей, прогнозируем ключевые метрики и выявляем точки роста, помогая делать приложения удобнее, функциональнее и эффективнее.

Обязанности

### **Основные задачи:** * построение витрин больших объемов (десятки терабайт), в т.ч. с возможностью частичного перестроения * оптимизация хранения данных в Greenplum: структура, партиционирование, сжатие, разработка и ведение логической схемы данных * обеспечение гигиены хранилища: контроль консистентности, структурная единообразность, управление зависимостями * разработка автоматических тестов и мониторинга качества данных в пайплайнах * работа с Apache Airflow: построение и поддержка DAG’ов * построение и оптимизация ETL процессов загрузки данных из Clickstream в Greenplum.

Требования

### Наши ожидания: * высшее техническое образование * опыт в разработке сервисов Data-аналитики не менее 3-х лет * понимание принципов распределенных вычислений * знание и понимание DevOps практик * отличное знание классических алгоритмов и структур данных. * знания принципов построения различных систем хранения и обработки данных * знание SQL, Python * понимание технологий интеграции REST, Kafka и форматов обмена данными * опыт работы с экосистемой Hadoop * опыт работы с ETL-инструментами (к примеру, AirFlow) * опыт работы с CI/CD pipeline * знание технологий HDFS, Spark, HBase * подготовка карты данных и сопроводительной документации.

Условия

### Мы предлагаем: * **офисный формат работы** * годовой бонус и ежегодный пересмотр * расширенный ДМС с первого дня + стоматология и льготное страхование для семьи * корпоративный университет Сбера, внутренняя образовательная платформа, участие в IT-конференциях * офис на Кутузовской с видом на набережную, зонами отдыха и спортзалом * льготная ипотека в Сбере, корпоративная пенсионная программа, подписка СберПрайм+, скидки от партнеров и сервисов группы компаний.