Data Engineer (Центр данных и отчетности)

Описание

Мы – команда рисков и в нашей зоне ответственности следить за качеством разрабатываемых моделей, корректностью их работы в промышленной среде, а также качеством данных, на которых применяются математические модели группы Сбера. Мы ищем DE, способного реализовать, оптимизировать и поддерживать код подготовки и проверки качества витрин данных, используемых в процессах предотвращения реализации модельного риска.

Обязанности

* создание и настройка автоматизированных скриптов сбора данных для мониторинга моделей * разработка и применение тестов для анализа качества собранных витрин * проведение проверок корректности сбора данных для разработки наиболее значимых моделей * расчет различных вариантов целевых показателей для продвинутого мониторинга моделей * реализация внутренних библиотек для автоматизации рабочих процессов * взаимодействие с разработчиками моделей/витрин (DS/DE) с целью уточнения деталей сбора данных использованных для разработки и эксплуатации моделей машинного обучения * профилирование источников данных. Формирование рекомендаций и требований на доработку базового слоя витрин.

Требования

* высшее образование (техническое/математическое) * продвинутые знания SQL (оконные функции, обобщенные табличные выражения, вложенные запросы) * знание Python и владение инструментами работы с данными (pandas, matplotlib, pyspark) * умение тестировать и документировать собственный код, а также работать с существующим кодом * навыки коммуникации и взаимодействия с контрагентами (DS/DE) * умение работать в режиме многозадачности. Будет плюсом, если ты имеешь: * опыт практической работы с Hadoop+Spark * опыт практической работы с postgres, Greenplum * опыт работы с git, bitbucket * опыт работы с Jira/Confluence или аналогами * опыт аналитики/разработки хранилищ данных и витрин данных, ETL-процессов * опыт работы с Linux также приветствуется.

Условия

* комфортный современный офис рядом с м. Кутузовская * формат работы: офис * годовая премия * корпоративный спортзал и зоны отдыха * более 400 образовательных программ СберУниверситета для профессионального и карьерного развития * регулярные митапы и развитое DS-community * расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа * гибкий дисконт по ипотечному кредиту, равный 1/3 ключевой ставки ЦБ * бесплатная подписка СберПрайм+, скидки на продукты компаний-партнеров * вознаграждение за рекомендацию друзей в команду Сбера.