Data Engineer (Профиль)

Описание

Мы — команда профессионалов, разрабатывающая современные сервисы и компоненты для платформы внутренней безопасности, решающие задачи выявления внутренних угроз и борьбы с мошенничеством. Ищем Data Engineer-а с глубокими аналитическими навыками и опытом извлечения, подготовки и очистки больших объемов табличных и текстовых данных. Основные направления твоей деятельности: * Извлечение и подготовка данных для последующего анализа. * Очистка и трансформация данных для повышения их качества и готовности к использованию. * Участие в проектах по выявлению аномалий и внутренних угроз. Что мы предлагаем: * Перспективы карьерного роста как в направлении Data Engineering, так и в области Data Analytics. * Возможность стать частью сплочённой команды экспертов, совместно решающих нестандартные задачи информационной безопасности. * Интересные проекты, где ты сможешь применить и развить свои аналитические и инженерные навыки.

Обязанности

* Загрузка, обработка и преобразование больших объемов данных из разнородных хранилищ в рабочие среды; * Проектирование и создание аналитических витрин данных; * Анализ структур и форматов данных в источниках, оценка их пригодности для конкретных бизнес-задач; * Мониторинг и оптимизация рабочих процессов обработки и загрузки данных; * Контроль качества входных данных и автоматизация проверки качества данных; * Разработка инфраструктуры и внутренних сервисов для эффективной обработки больших объемов данных; * Автоматизация повторяющихся операций с данными; * Создание технической документации и поддержка баз знаний по работе с данными; * Консультация пользователей внутри компании по вопросам использования данных.

Требования

* Опыт работы от двух лет в роли Data Engineer или Data Analyst; * Продвинутый уровень владения SQL (аналитические функции, подзапросы, оконные функции, оптимизация запросов); * Практический опыт работы с большими объемами данных в реляционных СУБД (PostgreSQL, MS SQL, Clickhouse, GreenPlum или Oracle); * Опыт работы с технологиями экосистемы Big Data (Hadoop, Spark, Hive); * Опыт проектирования витрин данных; * Понимание концепции и принципов организации хранилища данных (DWH). **Дополнительные ожидания:** * Опыт работы с ETL-инструментом Apache Airflow или другим оркестратором; * Опыт программирования на Scala / Python; * Готовность глубоко погружаться в изучение архитектуры существующих баз данных и документации по структурам данных; * Понимание базовых принципов построения распределенных систем хранения и обработки данных; * Опыт работы в гибких методологиях управления проектами (Agile, SCRUM, Kanban). **Будет плюсом:** * Опыт переноса и интеграции больших объемов данных из различных источников; * Владение инструментами системы контроля версий (например, Git); * Базовые знания банковской сферы.

Условия

* Рабочее место в современном офисе на м. Кутузовская с возможностью отдыха в течение дня: Lounge-зоны, зоны коворкинга, кафе, оборудованные кухни, спортивный зал и спортивные групповые программы * График работы: офисный формат работы метро Кутузовская, Тульская * Оклад + годовое премирование и социальная поддержка сотрудников; * ДМС с первого дня работы для сотрудников и льготная медицинская страховка для близких * Корпоративное обучение за счет компании, в т.ч. возможность посещать конференции по профессиональной тематике, а так же огромный каталог образовательных программ * Реальная возможность для профессионального и карьерного роста в it-направлении крупнейшего Банка * Работу по Agile с лучшими из IT индустрии: 2000 продуктовых команд; * Яркую и насыщенную корпоративную жизнь: «Зелёный марафон», Сбербанкиада, КВН, волонтёрские программы и т.д. * Льготные банковские продукты для сотрудников.