Разработчик ETL

Описание

Вы примете непосредственное участие в масштабном проекте по созданию платформы ГосТех — единой экосистемы для разработки и предоставления государственных сервисов. Вашей основной задачей станет улучшение процессов предоставления услуг на платформе Гостех, начиная от момента получения заказа и заканчивая сдачей выполненных работ. Вам предстоит глубоко погрузиться в действующие процессы, выявить их недостатки и разработать подходы, существенно повышающие скорость и качество предоставления услуг.

Обязанности

* разработка, тестирование и поддержка ETL/ELT-процессов * настройка и оптимизация пайплайнов обработки данных, запросов к хранилищам данных * участие в сборе, анализе и формировании требований бизнес-заказчиков в части ETL/ELT-процессов * участие в разработке интеграционной архитектуры * разработка метрик для измерения эффективности ETL/ELT-процессов * взаимодействие с кросс-функциональными командами

Требования

* опыт работы с ETL/ELT-инструментами (NiFi, Airflow или аналоги), Kafkа, колоночными СУБД (ClickHouse), реляционными СУБД (PostgreSQL), S3 * понимание различных подходов к интеграции (ESB, API Gateway, Message broker, Service Mesh) * опыт настройки мониторинга и алертинга ETL/ELT-пайплайнов (Prometheus, Grafana и т.п.) * умение оптимизировать ETL/ELT-процессы на основе метрик * базовые навыки программирования на Python/Java * понимание описания бизнес-процессов в форматах BPMN, SIPOC * знание принципов построения DWH и Data Lake * базовое знание DevSecOps * опыт работы с таск-трекерами (Jira), wiki-системами (Confluence) * навыки работы с генеративными AI-моделями, опыт создания AI-агентов и использования их в работе

Условия

* работа в офисе БЦ «Даниловский форт» * график 5/2, отсутствие строгого дресс-кода * ежегодный пересмотр зарплат и годовая премия * уникальная система обучения Сбера для профессионального и карьерного развития * расширенный ДМС и льготное страхование * ипотека для сотрудников выгоднее на 4% * бесплатная подписка на Сберпрайм+, скидки на продукты компаний-партнеров * корпоративная пенсионная программа * вознаграждение за рекомендацию друзей в команду Сбера