Разработчик на С++ в команду разработки технологий индексации данных Яндекс Маркета

Наша команда отвечает за обработку и хранение сотен терабайт данных и надёжность платформы, способной вместить более трёх миллиардов товарных предложений. Каждую минуту мы обрабатываем и доставляем десятки миллионов изменений данных о товарах.

В основе всех наших микросервисов лежат YT как способ хранения, BigRT (фреймворк потоковой обработки данных) + MapReduce как способ обработки, Logbroker и QYT (аналоги Kafka) как способ поставки, Userver как способ синхронного взаимодействия.

Какие задачи вас ждут

Разработка ecom-платформы
Вам предстоит развивать архитектуру, давать продуктовым командам возможность быстро делать новые запуски и избавить их от необходимости программировать. Идеальная поставка данных через нашу инфраструктуру — это данные и конфиг для их процессинга. Новая фича на выдаче — за один день.

Разработка высоконагруженных сервисов
Необходимо будет выжимать максимум из YT, Logbroker, QYT. Обрабатывать и поставлять данные за секунды. Утилизировать наше железо лучше. Переходить на Userver там, где нам нужны синхронные операции.

Простая и быстрая интеграция с десятками соседних микросервисов
Сейчас мы умеем поставлять данные по подписке (через конфиг) для B2B-сервисов и хотим распространить эту практику и на B2C.

Мы ждем, что вы

• Имеете опыт промышленной разработки на С++
• Умеете выстраивать процесс разработки, проводить ревью архитектуры, кода и т. д.
• Хотите и умеете писать высоконагруженный код и заниматься оптимизациями
• Знаете базовые алгоритмы и структуры данных
• Готовы изучать новое и читать много кода
• Критически мыслите

Будет плюсом, если вы

• Работали с распределёнными вычислениями и большими данными
• Знаете Python