Senior Data Engineer

Мы находимся в поиске Senior Data Engineer в платформенную команду BI.

Ваши задачи:

• Реализация ETL в Hadoop (с помощью Airflow);
• Работа с различными источниками данных: Oracle, MS SQL, API личных кабинетов, микросервисы;
• Батч и стримы с помощью PySpark и Kafka;
• Подготовка витрин для анализа (Hive + Spark+ SQL).

Мы ждем от будущих коллег:

• Уверенное владение Python;
• Опыт использования эко-системы Hadoop: HDFS, Apache AirFlow, Hive, Kafka, Spark;
• Знание SQL;
• Опыт работы с реляционными базами данных (Oracle).

Наш стек: Cloudera hadoop, Kafka, Spark, Airflow, Jira, Confluence, GitLab.

Условия работы:

• Формат работы на выбор: офис/гибрид/удаленка;
• Гибкий график (с 8 до 17, с 9 до 18 или с 10 до 19);
• Участие в проекте кафетерия льгот (ДМС, спорт, мобильная связь, обучение);
• Полугодовые премии;
• Корпоративная скидка 30% на продукцию сети наших магазинов (Спортмастер, O`STIN, FUNDAY);
• Внутреннее и внешнее обучение, конференции;
• BestBenefits – сервис персонализированных скидок и привилегий;
• Технику предоставляем.