Дата-инженер в В2В-направление Лавки

Яндекс Лавка B2B — это новый проект по созданию модуля хранилища данных и отчётности для иностранных B2B-партнёров Лавки. Сейчас наша команда в поиске дата-инженера, который совместно с аналитиками будет проектировать и оптимизировать сложнейшие расчёты и алгоритмы, разрабатывать инструменты для сотен бизнес-пользователей.

Мы создаём продукт, который будет стандартом индустрии для новых бизнесов по доставке продуктов во всем мире, присоединяйтесь!

Какие задачи вас ждут

Развитие хранилища данных
Вы будете создавать с нуля хранилище данных для продукта B2B на облачных технологиях обработки и хранения данных, оптимизировать нетривиальные ETL-процессы обработки больших данных.

Обеспечение стабильного расчёта бизнес-метрик
Совместно с командой аналитиков вам предстоит работать с данными на каждом этапе их трансформации: от появления информации в конкретном источнике до отображения в BI.

Задачи по оптимизации
Наша команда поддерживает и модифицирует созданные решения, чтобы обеспечить доступность сервиса и корректность данных для принятия решений.

Мы ждем, что вы

• Уверенно программируете на Python
• Хорошо знаете Python и понимаете устройство современных реляционных баз данных
• Разрабатывали ETL-/ELT-процессы и проектировали хранилища данных
• Разбираетесь в классических алгоритмах и структурах данных.

Будет плюсом, если вы

• Знакомы с облачными технологиями обработки и хранения данных Snowflake, Databricks, Redshift, BigQuery
• Знакомы со стеком технологий Hadoop, Spark, Hive
• Работали со специализированными аналитическими базами данных Greenplum, Vertica, ClickHouse, Teradata
• Разрабатывали процессы обработки сложных событий (CEP) во времени, приближенном к реальному, на Kafka Streams, Spark, Flink
• Руководили стажёрами или начинающими специалистами
• Работали по методологии Agile