Senior Системный аналитик

Описание

Мы создаем и развиваем корпоративный движок потоковой обработки данных на основе Apache Flink, который используется разработчиками банка для построения приложений обработки данных в реальном времени (фрод-мониторинг, скоринг, обогащение транзакций, расчеты) Вы будете работать в команде, которая отвечает за фреймворк и платформенные возможности Flink. Мы не пишем бизнес-логику для конкретных сервисов, а создаем инструменты, лучшие практики и инфраструктурные компоненты, чтобы потребители (другие команды банка) могли эффективно, безопасно и надежно разрабатывать и эксплуатировать свои потоковые приложения в Kubernetes.

Обязанности

### Задачи: * анализ, проработка ТЗ и приемка реализации механизмов Stateful-обработки с использованием внешних State Backends (таких как S3-совместимое объектное хранилище, HBase, возможно Fluss) для сценариев соединения с большими справочниками и хранения состояния приложений * проектирование решений для повышения отказоустойчивости и управляемости приложений (savepoints, автоскейлинг, восстановление) * разработка требований к интеграции Flink-приложений с корпоративными системами: аутентификацией, секрет-менеджерами, системами логирования (ELK), метриками (Prometheus/Grafana) * проработка требований к системе мониторинга состояния Flink-кластеров и джобов (метрики JVM, backpressure, checkpoint durations, lag) * анализ и проектирование процесса управления жизненным циклом приложений (деплой, апгрейд, остановка) через специализированный корпоративный портал управления сервисами. Интеграция Flink JobManager/REST API с этим порталом * выявление и формализация потребностей внутренних команд-разработчиков, создание подробной технической документации, чек-листов и best practices * тестирование реализованных функций: разработка тест-планов, сценариев (включая негативные и нагрузочные), проведение приемо-сдаточных испытаний.

Требования

### Мы ожидаем: * опыт работы системным или бизнес-аналитиком от 4 лет, из них не менее 2 лет в области потоковой обработки данных или Big Data * знание принципов работы систем мониторинга: Prometheus, Grafana. Умение читать и интерпретировать метрики * продвинутый уровень SQL, умение работать с технической документацией (RFC, официальная docs) * навыки декомпозиции сложных задач, построения процессов, отличные коммуникационные навыки для работы с техническими командами (разработчики, DevOps) и потребителями (data-инженеры) * умение четко и структурно документировать требования в виде ТЗ/User Stories с критериями приемки. ### Будет плюсом: * глубокое понимание архитектуры Apache Flink: концепции операторов, state, checkpointing, savepoints, exactly-once семантика, роль JobManager/TaskManager * практический опыт проектирования или эксплуатации Flink-приложений. Понимание проблематики хранения и восстановления состояния * знание экосистемы Hadoop/ Big Data: HDFS, HBase, Kafka. Понимание принципов работы с объектными хранилищами (S3) * опыт работы с Kubernetes: понимание основных концептов (Pods, Deployments, Services, ConfigMaps).

Условия

### Мы предлагаем: * комфортный современный офис: БЦ Даниловский форт, рядом с М.Тульская, Верхние котлы * возможность выбрать удобный график – офис/гибрид * ежегодный пересмотр зарплаты, годовая премия * корпоративный спортзал и зоны отдыха * более 400 образовательных программ СберУниверситета для профессионального и карьерного развития * расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа * гибкий дисконт по ипотечному кредиту, равный 1/3 ключевой ставки ЦБ * бесплатная подписка СберПрайм+, скидки на продукты компаний-партнеров * вознаграждение за рекомендацию друзей в команду Сбера.