Data Engineer

Описание

Мы — команда, которая развивает внутреннюю платформу данных компании, предназначенную для решения задач продуктовой аналитики, исследования и визуализации данных, персонализации и предоставления других аналитических сервисов. Наша платформа обрабатывает петабайты данных и миллиарды запросов в сутки. Мы ищем Data-инженера в нашу команду из 6-8 человек. Мы любим то, что делаем, и хотим делать еще больше и еще лучше.

Обязанности

* Развивать платформу как self-service для аналитиков — разрабатывать новые сервисы и фичи для удобства пользователей. * Участвовать в проектировании и модернизации инфраструктуры. * Поддерживать существующий функционал. * Оптимизировать и автоматизировать процессы — мы не делаем массовое ручное клепание витрин и одинаковых ETL. * Генерировать идеи и улучшать платформу — нам важно мнение каждого инженера. Технологический стек: * Языки программирования: Python (обязательно), Go (желательно). * Базы данных: ClickHouse, GaussDB (GreenPlum), PostgreSQL. * Big Data: Kafka, Spark. * DevOps и инфраструктура: Docker, Kubernetes, Ansible, Terraform. * Облака: SberCloud, Huawei Cloud.

Требования

* практический опыт работы с Python от 2-х лет, базовый опыт с **GoLang** приветствуется * опыт оптимизации SQL-запросов, понимание внутреннего устройства БД * опыт работы с большими языковыми моделями (LLM) приветствуется * базовый опыт администрирования БД * уверенное владение Unix-подобными системами и знание базовых команд * базовые навыки DevOps (Docker, Kubernetes, Ansible, Terraform) * опыт работы с облачными платформами управления данными (SberCloud / Huawei Cloud) * знание стека Big Data, в частности Kafka и Spark * опыт участия в проектах по созданию DWH, Data Lake, Data Management Platforms и построению высоконагруженных систем будет плюсом

Условия

* комфортный современный офис рядом с м. Кутузовская * гибридный формат работы – 1 раз в неделю в офисе * ежегодный пересмотр зарплаты, годовая премия * корпоративный спортзал и зоны отдыха * более 400 образовательных программ СберУниверситета для профессионального и карьерного развития * расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа * ипотека для сотрудников выгоднее до 4% * бесплатная подписка СберПрайм+, скидки на продукты компаний-партнеров * вознаграждение за рекомендацию друзей в команду Сбера.