Data Engineer (HR-платформа Пульс)

Описание

HR платформа Сбера – собственный продукт компании, который покрывает весь жизненный цикл работы с человеческим капиталом: подбор, обучение, развитие, оценка, результативность, обратная связь и др. Наша команда Data-инженеров занимается развитием хранилища для решения широкого спектра задач в рамках аналитических продуктов, включая подготовку данных для встроенной в HR платформу BI-системы. Основной фокус команды – задачи для бизнеса (создание витрин) и развитие платформы данных (внедрение и улучшение инструментов).

Обязанности

* проектирование и реализация ETL/ELT процессов * создание витрин * развитие процессов управления данными и их качеством * оптимизация запросов, подходов к хранению и обработке данных * внедрение и развитие инструментов платформы данных * общение с заказчиками для более качественной проработки требований * работа с ТЗ, взаимодействие с заказчиками в части доуточнений / доработки требований * выполнение задач с большой аналитической составляющей (расчёт метрик, продумывание логики преобразования данных для реализации ТЗ)

Требования

* Clickhouse (продвинутый пользователь, работа с кластером, использование аналитических функций, массивы, join-ы, материализованые представления, оптимизация сложных расчётов на больших данных, проектирование пайплайнов, реализация разных стратегий обновления, включая инкрементальную) * высокий уровень SQL * опыт проектирования моделей данных под определенные условия * Рython (уровень владения middle +) * Аirflow (проектирование ETL процессов, написание DAGs для автоматизации пайплайнов, создание операторов) * опыт внедрения DQ (мониторинг качества данных) * GIT/Linux * понимание принципов работы брокеров сообщений (Kafka) * опыт в промышленной разработке от 5 лет

Условия

* Хороший офис (AgileHome) рядом со станцией метро Кутузовская со всеми удобствами (столовые + множество кафе + кухни с холодильниками, кофемашинами; бесплатный спортзал; бесплатная подземная парковка; места для отдыха - настольный теннис, несколько PlayStation, кикер, бильярд) * Достойная заработная плата (оклад + премии) * Возможность работать с современным стеком технологий * Социальный̆ пакет (ДМС) * Огромный каталог образовательных программ, возможность обучения и сертификации за счет компании * Программа льготного кредитования в СБЕРе * Дисконт-программы от множества компаний партнеров * Возможность принять участие в других крупных и уникальных проектах.