Data Engineer (RnD)

Описание

Команда кибербезопасности Сбера создает новый комплексный продукт по выявлению дипфейков (видео, аудио, текст), в том числе и для потребностей государственного сектора. Для его реализации мы собираем команду высококвалифицированных специалистов. Продукт будет расти и развиваться и не ограничится 1-2 кварталами разработки. На вакансию Дата-инженера мы ищем специалиста, который будет искать, собирать и создавать данные для обучения ML-моделей. Создавать и поддерживать БД для удобного и быстрого доступа к данным. Дата-инженер с навыками Python-разработчика и понимаем работы DS.

Обязанности

* поиск, извлечение, очистка, загрузка и предобработка данных из свободного доступа * автоматизация процессов по получению характеристик и описания данных (видео, аудио, изображения, текст) и разработка инструментов для автоматизации рутинных задач, связанных с обработкой данных * описание потребности для разработки специализированного ПО DataScientist-ами * реализация регулярных процессов поставки данных для продуктовых команд и DataScientist-ов * проектирование и организация хранилища данных, артефактов и логов обучения ML-моделей, артефактов работы продукта.

Требования

* уверенно программируете на Python * работали со специализированными аналитическими инструментами на базе Python (Jupyter, Pandas, Numpy, Matplotlib) * работали с базами данных SQL, PostgreSQL и подобными и обладаете знаниями SQL на продвинутом уровне (аналитические функции, хранимые процедуры, материализованные представления, оптимизация производительности) * запускали open-sourse проекты и ML-модели для генерации и аугментации данных * работаете в командной строке Unix-подобных систем (Linux, macOS). * сами создавали, поддерживали и развивали базы данных * имеете опыт работы с очередями Kafka, RabbitMq

Условия

* комфортный современный офис БЦ Оружейный * формат работы: офис * ежегодный пересмотр зарплаты и годовая премия  * корпоративный спортзал и зоны отдыха * более 400 образовательных программ СберУниверситета для профессионального и карьерного развития  * расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа * ипотека выгоднее до 7% для каждого сотрудника * бесплатная подписка СберПрайм+, скидки на продукты компаний-партнеров * вознаграждение за рекомендацию друзей в команду Сбера.