Data Engineer

В нашей команде дата-инженеры занимаются организацией данных и витрин для их получения. Главные потребители наших данных — data scientist’ы, которые занимаются поиском закономерностей, значимых признаков в данных и тренировкой моделей машинного обучения. Сейчас мы активно расширяем команду и приглашаем к сотрудничеству дата-инженеров!

Стек: Apache Airflow, Apache Spark, Apache Kafka, Apache Flink, ClickHouse, Kubernetes, Hive, Impala, Zeppelin, HUE, Scala и Python.

Задачи

• Проектирование и построение DWH.
• Подготовка витрин данных для отчётности, бизнеса и дата-аналитики.
• Организация пайплайнов сбора данных от бэкендов и других хранилищ.
• Организация пайплайна подготовки датасетов для обучения ML-моделей.
• Организация мониторинга компонентов корпоративной платформы данных.
• Разработка ETL/ELT-пайплайнов и поддержка существующих.

Что мы ожидаем

• Знание Java 8+, Scala или Python (один из языков на хорошем уровне).
• Знание алгоритмов и структур данных.
• Знание SQL и принципов работы классических БД.
• Желание развиваться в BigData и ML.

Какие ещё навыки будут полезны в работе

• Знание Hadoop, Spark, YARN, Hive, Impala.
• Знание NoSQL-баз: Cassandra, Elastic.
• Анализ данных при помощи Python-ноутбуков Jupyter, Zeppelin.
• Работа с очередями сообщений: Kafka, Rabbit, JMS.

Твои возможности в Koronatech

• Понятная траектория роста (Performance Review, карьерные консультации, индивидуальная карта развития и т.д.).
• Обучение и развитие за счёт ресурсов компании (Учебный центр, корпоративная библиотека, оплата внешнего обучения).
• Социальный пакет (ДМС с первого рабочего дня, скидки от партнёров, детская программа и т.д.).
• Насыщенная корпоративная жизнь (радио, подкасты, кибертурнир, собственные мероприятия и участие в крупных событиях отрасли).
• Возможность быть преподавателем, наставником, автором корпоративного блога, спикером — каждый выбирает то, что подходит именно ему.
• Официальное трудоустройство с первого дня, полностью белая зарплата.
• Удобный формат работы (удалённо по РФ или в офисе/в гибридном формате).