Middle Data Engineer в Golden Record [Big Data, МТС Веб Сервисы]

МТС — это мультисервисная цифровая экосистема. Мы создаём и развиваем сервисы в сфере мобильной связи, больших данных, искусственного интеллекта, облачного хранения, медиа и финансов — все они делают жизнь людей проще и интереснее.

Big Data – один из ключевых юнитов МТС. Наши технологии применяются практически во всех направлениях компании - финансы, маркетинг, обслуживание, планирование сети, HR, розница.

Команда центра Big Data находится в поиске Middle Data Engineer в Golden Record.

Продукт Golden Record – мастер-система по управлению клиентскими данными в экосистеме МТС. Один из ключевых активов практически любого бизнеса – это клиенты. Для них МТС создает лучшие продукты, сервисы и услуги. Golden Record – команда профессионалов в создании высоконагруженных систем управления клиентскими данными. Мы храним и обрабатываем персональные данные, а также формируем широкий профиль клиента экосистемы, собирая информацию от наших индустрий телекома, онлайн-кинотеатра, музыки и других цифровых сервисов. Наша задача знать о клиенте все, чтобы предоставить эти знания бизнесу для персональных рекомендаций, повышения эффективности маркетинговых кампаний, непрерывного улучшения обслуживания клиентов и продвинутой аналитики.

Чем предстоит заниматься

• Разрабатывать и оптимизировать ETL-процессы при помощи pyspark
• Разрабатывать витрины и ставить на расписание через Airflow
• Заниматься мониторингом целостности данных в БД
• Настраивать ETL процессы загрузки данных через стриминги (spark streaming)
• Проводить работы по повышению отказоустойчивости и скорости работы дата части сервисов

Кого мы ищем

• Знание и опыт работы с Python
• Знание и опыт работы с SQL
• Опыт работы со Spark, Hive, Hadoop
• Знание PostgeSQL
• Знание Git
• Знание Airflow
• Будет плюсом опыт с работы с Cassandra, Oracle, k8s, Kafka

Что мы предлагаем

• Собственную платформу MTS Ocean для получения ИТ-ресурсов, а это значит, что деплой, мониторинг, observability - не будут для вас проблемой, вы сможете сосредоточиться на фичах Профессиональные гильдии инженеров по направлениям, чтобы поддерживать друг друга и обмениваться опытом
• Внутреннюю площадку TechTalks для обмена опытом, дискуссий, развития навыков самопрезентации
• Участие во внешних IT конференциях. Мы выступаем на HighLoad++, DataFest, Mobius, Test Driven Conf, Joker, DevOps, Матемаркетинг и даже проводим собственную конференцию по архитектуре Hello, conference!
• Полезные курсы и вебинары в корпоративном университете и электронные библиотеки
• Медицинскую страховку с 1 месяца со 100% покрытием расходов, включая стоматологию, страхование жизни и здоровья в поездках за рубеж. А еще можно застраховать родственников с корпоративной скидкой
• Единую подписку МТС Premium — KION light в онлайн-кинотеатре KION, сервис МТС Music, 30 дней бесплатного пользования подпиской OZON Premium Скидки и предложения от партнеров на фитнес, занятия английским и прочее