Scene-Adaptive Motion Planning with Explicit Mixture of Experts and Interaction-Oriented Optimization [2/2]

Продолжаем разбирать статью о новом learning-based-методе без постобработки. В предыдущем посте обсудили, как работают якоря, роутер и эксперты. Сегодня поговорим о том, как авторы учат модель лучше учитывать взаимодействия с другими участниками движения.

Взаимодействия с другими агентами

По анализу авторов, значительная часть неудач в nuPlan связана с взаимодействиями эго и других машин. Чтобы модель лучше с ними справлялась, авторы адаптируют функцию потерь и добавляют вспомогательную задачу.

За основу берётся временное перевзвешивание: ошибки в ближайшем будущем важнее ошибок на дальнем горизонте. Но у такого подхода есть побочный эффект: важное взаимодействие, которое случится нескоро, тоже получает маленький вес.

Чтобы это исправить, по реальным траекториям ищутся интервалы взаимодействия: участки, где пути эго и другого агента проходят через одну область. Не обязательно одновременно, ведь важно в том числе научиться решать, кто проедет первым. На этих интервалах вес ошибки траектории эго возвращают к максимальному.

Вспомогательная задача заключается в том, чтобы предсказывать движение других агентов с учётом запланированной траектории эго. Обратно в планировщик эти предсказания не поступают, но помогают энкодеру лучше понимать сцену.

Итоги

Основной прирост, судя по экспериментам самих авторов, даёт вовсе не MoE, а блок взаимодействия с другими агентами. Использование явных экспертов и якорей закладывает в модель сильные предположения о том, как устроено вождение. На небольшом датасете nuPlan это может сработать, но на более разнообразных данных модель вероятно выучит эти паттерны сама, причём лучше.

Занимательно, что во введении авторы ругают rule-based-подходы за дорогую поддержку правил, а потом возвращают правила через разметку семи сценариев. При этом не указывают, насколько точно модель различает эти сценарии. А это важно: если роутер ошибся, в работу пойдут и не тот эксперт, и не те якоря.

И ещё странность: статью о взаимодействии проверяли в режиме, где другие машины на эго не реагируют, а просто едут по записанным траекториям.

Тем не менее, статья и идея интересные. Но пока всё проверено только в довольно урезанном режиме симуляции, так что к результатам стоит относиться с осторожностью.

Разбор подготовил ❣️ Григорий Плотников
404 driver not found