Data Engineer (офис, Новосибирске)

Описание

Мы - команда разработки Аналитической Платформы (АПЛ) розничного взыскания, занимаемся разработкой дата-продуктов на основе большого объема данных и ищем высоквалифицированного разработчика / дата инженера хранилища данных, способного принять активное участие в развитии нашей аналитической платформы (тех стек Greenplum / PostgreSQL / Hadoop). АПЛ - это платформа с 3000+ активных пользователей, предоставляющая возможность разработки аналитических продуктов на основе современной микросервисной архитектуры с использованием стека Greenplum, PostgreSQL, Openshift, Hadoop экосистемы (Spark и т.д. ), Apache Airflow, Python, Java, Java script.

Обязанности

### **Задачи:** * поиск и анализ источников данных * аналитика и проектирование витрин данных под потребности бизнес-заказчиков * разработка витрин данных на основе Greenplum (PL/pgSQL) и Hadoop (Java spark) и вывод их в пром в соответствии с банковским релизным процессом * подготовка и сборка дистрибутивов, сопровождение по стендам разработки и тестирования * разработка решений потоковой обработки данных в режиме Near Real Time (NRT) и пакетной(Batch) * выстраивание и оптимизация производительности ETL-процессов * оптимизация существующих разработок * разработка и поддержка сопроводительной документации и спецификаций данных, базы знаний по вопросам работы с данными.

Требования

### **Мы ждем от кандидата:** * опыт работы дата-инженером от 2-х лет с MPP и реляционными СУБД: Greenplum, PostgreSQL, способность выбирать архитектурные паттерны, связанные с этими особенностями будет являться преимуществом * уверенное знание SQL: агрегатные, аналитические функции, опыт написания и оптимизации сложных запросов, программных единиц на PL/pgSQL * опыт разработки и внедрения корпоративных хранилищ данных (DWH) * опыт работы с CI/CD решениями на базе Jenkins и Bitbucket/Git * навыки работы с генеративными AI-моделями; опыт создания AI-агентов и использования их в работе будет преимуществом.

Условия

### **Мы предлагаем:** * комфортный офис по адресу г. Новосибирск * ежегодный пересмотр зарплаты, годовая премия * корпоративный спортзал и зоны отдыха * более 400 образовательных программ СберУниверситета для профессионального и карьерного развития * программа адаптации и помощь руководителя на старте * расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа * гибкий дисконт по ипотечному кредиту, равный 1/3 ключевой ставки ЦБ * подписка Прайм с возможностью совместного использования на трёх близких * вознаграждение за рекомендацию друзей в команду Сбера.