ML-разработчик в команду симулятора автономного транспорта

В разработке автономных автомобилей главное — обеспечить безопасность. Управлять машиной, чтобы она ехала по дороге, несложно. Сложно сделать так, чтобы она правильно вела себя в разнообразных редких или опасных ситуациях: например, при непредсказуемом поведении других участников движения, в плохую погоду или при плохом освещении, а также с учётом особенностей работы оборудования. Воспроизводить такие ситуации в реальности дорого и опасно, поэтому важно уметь моделировать их с помощью технологий симуляции.

Чтобы тестировать подсистемы распознавания и всё ПО в end-to-end-режиме, нужно генерировать реалистичные данные сенсоров (видео, лидары, радары). Задача включает как research-элементы (генеративные диффузионные нейросети, 3D-реконструкции), так и промышленный ML: построение ML-пайплайнов и процессов, сбор датасетов и метрик, которые максимально отражают бизнес-задачу.

Какие задачи вас ждут

Улучшение моделей генерации
Вы будете повышать качество нейросетей для 3D-реконструкции сцен и генерации с постпроцессингом данных симулированных сенсоров (камер, лидаров и радаров). Для этого нужно внедрять методы из академических статей, дорабатывать архитектуру, оптимизировать обучение и инференс, а также улучшать датасет — собирать, фильтровать и предобрабатывать данные.

Внедрение моделей в симулятор
Вам нужно будет внедрить модели в продакшн-симулятор. Необходимо выстроить процесс так, чтобы модели получали правильные данные, их инференс работал на большом кластере, а симуляции были полезны всем командам, которые занимаются разработкой автономного транспорта.

Мы ждем, что вы

• Работали с ML-проектами
• Проявляете интерес к компьютерному зрению, 3D-графике
• Уверенно знаете Python
• Владеете навыками работы с PyTorch

Будет плюсом, если вы

• Имели практический опыт обучения диффузионных моделей или 3D-реконструкций (3DGS, NeRF и т. д.)
• Строили продакшн-процессы с участием этих технологий
• Занимались 3D-графикой, 3D-рендерингом или активно этим увлекались
• Программировали на C++
• Участвовали в соревнованиях по ML или программированию: ACM ICPC, Codeforces, Topcoder, Kaggle и т. д.