Senior DWH Platform Engineer в Эйчартех

Команда DWH Эйчартех строит хранилище данных HR. Мы создаём экосистему продуктов и инструментов для анализа ключевых HR-метрик: найма, движения, обучения, вовлечённости и других аспектов жизни сотрудников. Руководители подразделений и HR-специалисты используют наши разработки для принятия управленческих решений.

Ищем опытного дата-инженера. Вам предстоит развивать DWH, создавать сервисы и интеграции, а также поддерживать работающую на их основе инфраструктуру.

Какие задачи вас ждут

Разработка и поддержка инфраструктуры
Вы будете создавать и поддерживать сервисы для обработки данных и интеграции с внешними системами, управлять бэкенд-серверами, обновлять и мониторить инфраструктуру DWH. Участвовать в развитии кодовой базы сервисов, с которыми мы интегрируемся, разрабатывать Python-библиотеки для дата-инженеров, создавать и поддерживать CI/CD-процессы для сервисов и ETL-пайплайнов. Обеспечивать высокую доступность и надёжность сервисов обработки данных, автоматизировать администрирование и сопровождение.

Работа с данными
Вам предстоит проектировать и развивать архитектуру DWH, разрабатывать и оптимизировать ETL/ELT-процессы, а также создавать и поддерживать витрины и модели данных.

Взаимодействие с командами
Вы будете сотрудничать с аналитиками, разработчиками, продакт-менеджерами и владельцами данных, собирать требования к данным и сервисам обработки и реализовывать их в DWH, а также помогать коллегам с использованием инфраструктуры и инструментов.

Мы ждем, что вы

• Работали дата-инженером либо бэкенд- или инфраструктурным разработчиком более четырёх лет
• Строили и поддерживали сервисы в продакшне
• Проектировали системы хранения данных, знакомы с теориями построения DWH
• Работали с системами обработки больших данных (Spark, Airflow)
• Работали с хранилищами и брокерами данных (S3, Greenplum, PostgreSQL, ClickHouse, Oracle, Kafka)
• Владеете Python на высоком уровне
• Хорошо знаете SQL
• Умеете строить надёжные и масштабируемые решения, автоматизировать рутинные процессы и доводить задачи до production-ready-состояния

Будет плюсом, если вы

• Работали с PySpark
• Разрабатывали DWH-системы с нуля
• Работали с данными для HR/people-аналитики
• Писали инфраструктурный код и участвовали в администрировании серверов
• Разбираетесь в DevOps-практиках и CI/CD-пайплайнах
• Знаете YQL