Senior data engineer

Описание

ИТ B2C — самая крупная экосистема в Сбере. Нас более 8000 человек в 18 городах России. Мы занимаемся разработкой и развитием розничных решений, помогая сделать сервисы Банка доступнее, безопаснее и удобнее. Ждем именно тебя! Мы создаем рекламную платформу на передовом стеке технологий. Размещение рекламы в интернете – это запросы для: \- рекламодателя для увеличения прибыли или узнаваемости продаваемого продукта \- сайтов, размещающих рекламу для получения прибыли от продажи места на сайте \- пользователя для получения полезной неназойливой рекламы Одним из ключевых условий для успешного решения этих задач является идентификация пользователей, позволяющая собирать профиль пользователя, для показа ему наиболее релевантной и интересной рекламы.

Обязанности

* создавать новый пайплайны по обработке данных (и развивать уже существующие); * проводить оптимизацию и тестирование пайплайнов * быть лидером поставки сервиса, отвечать за техническую целостность продукта и его работу в production * разработка и поддержка мониторингов качества ключевых метрик идентификации * решение ad-hoc задач по аналитике качества идентификаторов и георазметки

Требования

* опыт промышленной разработки на стеке Java/Scala/Python и хорошее понимание принципов одного из этих языков; * опыт работы c airflow\\oozie * практический опыт разработки приложений с использованием инструментов из big data стека: Spark Structured Streaming, Spark, Kafka, Hive, Impala, Hue, Hbase etc; * умение проектировать и создавать сложные системы по обработке больших данных; * хорошие знания SQL, опыт работы с одной из реляционной БД - PostgreSQL/MySQL/MS SQL Server/Oracle; * понимание подходов к организации разработки (CI/CD, DevOps). Будет плюсом: \- Опыт работы в рекламе  \- Опыт построения и интерпретации моделей классического ML (классификация, регрессия, кластеризация)

Условия

* гибридный формат работы * годовой бонус и ежегодный пересмотр * расширенный ДМС с первого дня + стоматология и льготное страхование для семьи * корпоративный университет Сбера, внутренняя образовательная платформа, участие в IT-конференциях * 90 дней удаленной работы из любого региона РФ * гибкий дисконт по ипотечному кредиту, равный 1/3 ключевой ставки ЦБ, корпоративная пенсионная программа, подписка СберПрайм+, скидки от партнеров и сервисов группы компаний.