Data Engineer (Due Diligence)

Описание

Ищем инженера по Дата-инженера в команду Due Diligence: анализ финансовой активности клиентов банка (юридические лица) в рамках кредитования, мониторинга, оценки рисков и других процессов банка. Работа команды позволяет выявлять негативные факторы деятельности компаний заемщиков в процессе кредитования. Результат нашей работы улучшает процесс для сотрудников Банка. Преимущественно, обработка больших данных и разработка витрин данных на Spark (Scala) с использованием pySpark. Базы данных PostgreSQL. Код храним в Bitbucket, DevOps трубы создаем на Jenkins.

Обязанности

### Обязанности: * анализ бизнес требований на разработку витрин * разработка промышленных витрин данных c использованием Hive, Spark и вывод их в ПРОМ.

Требования

### Требования: * опыт работы в области Data Engineer от одного года * знание SQL – продвинутый уровень (запросы, Join\`ы, агрегаты, группировки, вложенные запросы) * знание python: стандартные структуры данных (dict, list, set, модуль collections), pandas, numpy, h5py * опыт работы с Hadoop (Hive, Spark, HBase) является плюсом * знание Git * опыт разработки витрин данных и выстраивания логического слоя данных * опыт работы с обработкой больших массивов данных * опыта по выводу витрин в промышленную эксплуатацию (подготовка документации, сопровождение процесса) * навыки работы с генеративными AI-моделями; опыт создания AI-агентов и использования их в работе будет преимуществом * опыт использования GigaChat, Kandinsky и аналогов в продуктах, навыки создания и использования AI-агентов * инструментальное владение AI для анализа, генерации и автоматизации. ### Инструменты BigData: * Hadoop (Hive, Spark, Kafka, Oozie) * языки программирования (Scala, Python, Java) * инструменты DevOps (Git, Nexus, Jenkins).

Условия

### Условия: * офис в шаговой доступности от метро Кутузовская, отсутствие дресс-кода * никакой бюрократии, все не связанные с разработкой задачи выполняют выделенные роли в команде * полная свобода действий, важен результат * команда опытных инженеров * регулярное обучение hard и soft скиллам в нашем корпоративном университете * ДМС, страхование жизни, скидки для сотрудников, льготная ипотека от Сбербанка * регулярный пересмотр заработной платы в зависимости от результатов * бесплатный фитнес и тренажерный зал.