Data Engineer

Описание

Мы разрабатываем Единый профиль клиента – распределённую и высоконагруженную систему с несколькими типами хранилищ данных и прикладным резервированием. Наша цель – предоставить пользователям надежные, высокодоступные и масштабируемые сервисы, используя самый современный технологический стек. Кроме получения опыта разработки и экспертизы в используемом стеке, вы сможете поучаствовать в развитии сложной и требовательной к показателям производительности и доступности системы, в том числе, в таких масштабных мероприятиях, как обеспечение горизонтального масштабирование, перевод в облачную инфраструктуру, усовершенствовать свои навыки в оптимизации производительности и проработке архитектуры разных калибров. ### Вам предстоит: * проектирование и разработка аналитических витрин по предсказаниям поведения клиентов, их склонностей и потребностей, отчетности и моделирования на стеке Hadoop + Spark + Java; * мониторинг и оптимизация процессов сборки витрин; * участие в формировании и улучшении подхода к разработке витрин; * разработка и поддержка сопроводительной документации и спецификаций данных, Развитие и поддержка базы знаний по вопросам работы с данными. ### Мы ожидаем: * опыт проектирования витрин данных и хранилищ данных * знание типовой инфраструктуры DWH * опыт разработки на платформе Hadoop от 2 лет * опыт работы со стеком Hadoop (HDFS, Yarn, Hive, Spark, Oozie); * опыт работы с Kafka, Ozone будет плюсом * опыт работы с DevOps-инструментами (Jira, Jenkins, Ansible, Nexus, Git и пр.) * отличное знание SQL, опыт оптимизации запросов. ### Будет плюсом: * умение читать и разбираться в реализации чужого кода * будет преимуществом знание Java * навыки работы с генеративными AI-моделями; опыт создания AI-агентов и использования их в работе будет преимуществом * опыт использования GigaChat, Kandinsky и аналогов в продуктах, навыки создания и использования AI-агентов * инструментальное владение AI для анализа, генерации и автоматизации. ### Мы предлагаем: * формат работы: офис (Кутузовский проспект 32к1); * работу в офисе комфорт-класса в 3-х минутах от м. Кутузовская; * достойный уровень оплаты труда и годовой бонус; * масштабный проект и продукт, который будут использовать более тысячи клиентов; * работу с лучшими из IT индустрии, возможность внутреннего перемещения, корпоративное обучение за счет компании и курсы от СберУниверситета; * мощное железо, дополнительные мониторы и всё, что нужно для продуктивной работы; * ДМС с первого рабочего дня, корпоративную пенсионную программу, страхование от несчастных случаев и тяжелых заболеваний, подарки детям сотрудников на новый год; * льготную ипотеку, бесплатную подписку СберПрайм+, скидки на продукты компаний-партнеров, спорт зал и сауну прямо в офисе; * реферальную программу для сотрудников: можно пригласить в команду знакомых профессионалов и получить вознаграждение до 100 тыс. рублей.

Обязанности

###

Требования

###

Условия

###