Data engineer

Описание

Мы — амбициозная команда, которая занимается развитием BI-отчетности, автоматизацией расчетов различных показателей по операционным рискам и подготовкой данных для ML моделей. Мы создаём инновационные продукты, которые повышают эффективность и прозрачность бизнеса. **Используемые технологии и инструменты:** * основные технологии: Airflow, PostgreSQL, Kafka, Superset, Hadoop, Spark * языки программирования и инструменты: Python, SQL, Spark * системы управления кодом и CI/CD: BitBucket (Git), Jenkins * управление задачами и документацией: Jira, Confluence * работа по методологии Agile.

Обязанности

проектирование архитектуры и модели витрин данных разработка и оптимизация ETL-процессов для загрузки и обработки данных в DWH создание процессов мониторинга, проверок качества данных и автотестов разработанного функционала ведение технической документации по потокам данных.

Требования

* уверенный уровень владения Python и SQL * понимание принципов работы баз данных, обработки больших данных и концепций непрерывной интеграции и доставки (CI/CD) * проактивность и ответственность за конечный результат * английский язык на уровне чтения документации. **Будет преимуществом:** * опыт разработки автоматизированных ETL-потоков (желательно в Airflow) или схожего функционала * навыки работы с Flink * опыт разработки ИИ-агентов или LLM-пайплайнов.

Условия

регулярное обучение hard и soft skills в нашем корпоративном университете большое количество различных митапов и хакатонов с возможностью выступить на мероприятиях в качестве спикера льготная ипотека от Сбера для сотрудников прекрасный ДМС с лучшими клиниками города Москвы работа в лучшем офисе страны регулярный пересмотр заработной платы в зависимости от результатов бесплатный фитнес и тренажерный зал.