Инженер данных

В аккредитованную ИТ компанию «Коулмэн Тех» в данный момент ведем подбор на вакансию "Инженер данных".

Наши партнёры – крупные FMCG компании.

Чем предстоит заниматься:

• Проектировать и собирать витрины данных по разработанному ТЗ;
• Проектировать, разрабатывать и поддерживать ETL-процессы для загрузки данных из/в Data Lake;
• Писать документацию - комментировать код;
• Проводить кросс-ревью кода;
• Работать с data-аналитиками для создания новых и оптимизации существующих витрин.

Мы ожидаем:

• Опыт на позиции Data Engineer от 1,5 лет;
• Разработка и поддержка ETL-пайплайнов;
• Оптимизация производительности запросов (партиционирование, индексы, кеширование);
• Участие в Data Governance;
• Понимание основных операций СУБД и принципов DWH;
• Понимание принципов ETL;
• Опыт работы с Hadoop технологиями (Spark, Hive и тд);
• Опыт работы с Azure/Yandex облачными платформами;
• Опыт разработки и поддержки DAGs в Apache Airflow;
• Уверенное владение SQL, Python, pySpark;
• Опыт работы с базами данных PostgreSQL и ClickHouse;
• Опыт работы с Trino;
• Опыт работы с инструментами обеспечения качества данных (Great Expectations);

Условия, которые мы предлагаем:

• Официальное трудоустройство по ТК РФ на контрактной основе;
• Работа в команде профессионалов в крупнейшей международной FMCG компании с развитыми корпоративными ценностями и стандартами;
• Для работы выдаём корпоративный ноутбук;
• График работы: 5/2, 9:00 – 18:00 (мск);
• Формат работы: удаленно (с территории РФ).

Подавая заявку на эту вакансию, вы даёте согласие на обработку ваших персональных данных для целей рассмотрения кандидатуры и оформления трудоустройства (в соответствии с ФЗ-152 «О персональных данных»). Обработка данных осуществляется исключительно в рамках заявленной цели и с соблюдением требований законодательства.