Senior Data Engineer

Сейчас мы ищем Senior Data Engineer в команду «Внешние сервисы» на один из крупнейших проектов F&R.

Чем ты будешь заниматься

• Проектировать, разрабатывать, тестировать и поддерживать ETL/ELT-пайплайны для обработки данных в реальном времени и в пакетном режиме.
• Разрабатывать и оптимизировать потоковые приложения на Apache Flink.
• Создавать и поддерживать DAG в Apache Airflow для оркестрации всех процессов данных.
• Проектировать, наполнять и оптимизировать данные в распределённой базе данных на основе PostgreSQL и Citus.
• Участвовать в проектировании архитектуры хранения и обработки данных.

Мы ожидаем

• Знание и опыт работы с репликацией и кластеризацией PostgreSQL (Citus или аналогичными решениями).
• Опыт работы с Apache Flink, включая подходы CDC.
• Умение выполнять сложную нормализацию данных.
• Умение писать и оптимизировать сложные SQL-запросы для извлечения, преобразования и агрегирования данных в Spark.
• Знание принципов распределённой обработки данных, параллельного выполнения запросов и оптимизации кэширования.

Мы предлагаем

• Оформление в аккредитованную IT-компанию.
• ДМС со стоматологией и льготными условиями для членов семьи.
• Корпоративную технику.
• Удаленный или гибридный формат работы.
• Дружескую атмосферу и поддержку команды профессиональных и активных коллег.
• Корпоративные скидки и программы лояльности от наших партнеров.