Data Engineer

Сегодня билайн — компания изменений, чутко реагирующая на потребности рынка и людей. А ещё билайн — это команда, объединённая общими ценностями и общей целью — быть лидером телеком и digital рынков, предоставляя нашим клиентам новейшие продукты и услуги, а также сервис самого высокого уровня.

Сейчас у вас есть возможность присоединиться к лучшей команде Облачной телефонии в роли Data Engineer!

Итак, вам предстоит:

• Развивать и поддерживать полный цикл разработки ETL процессов - от постановки задачи до выведения в production.
• Разрабатывать и интегрировать новые пайплайны загрузки данных.
• Вести документацию разработки в Jira и Confluence.
• Развивать архитектуру хранилища, интегрировать новые источники. 
• Настраивать мониторинг и создавать алерты для контроля качества данных

Мы будем рады рассмотреть вашу кандидатуру, если у вас есть:

• Опыт работы с экосистемой Hadoop (Spark, Hive, HDFS, YARN).
• Опыт разработки на Scala (Spark), Python (Spark, Airflow, DS библиотеки).
• Навыки работы с VictoriaMetrics и Grafana.
• Знания и понимание SQL для работы с СУБД (Oracle,Postgres,MSSQL) и MPP системами.
• Общее понимание процессов CI/CD GitLab.

Наш стек:

• Scala 2.12.10 / Python 3.10.
• Apache Spark 3.0.1.
• Apache Airflow 2.6.0.
• Hadoop (hdfs, hive)

Что мы предлагаем:

• Трудоустройство в аккредитованную ИТ-компанию.
• Возможность работать дистанционно на территории РФ.
• Сильную команду специалистов, с которой можно расти.
• Свободу в принятии решений, возможность влиять на процесс и результат.
• Развитое внутреннее DE комьюнити (chapter из 150+ человек) с регулярными митапами и встречами по обмену опытом.
• Ежегодный процесс ревью.
• Десятки Пбайт разнообразных данных - от классических табличных до гео, графов, кликстримов, текстов и картинок.
• Внешнее и внутреннее обучение, участие в митапах и конференциях.
• Полис добровольного медицинского страхования, обслуживаемый в лучших клиниках.
• Корпоративные скидки на фитнес, обучение, путешествия и т.п.
• Служебную сотовую связь.