Продолжаем разбирать статью о новом learning-based-методе без постобработки. В предыдущем посте обсудили, как работают якоря, роутер и эксперты. Сегодня поговорим о том, как авторы учат модель лучше учитывать взаимодействия с другими участниками движения.
Взаимодействия с другими агентами
По анализу авторов, значительная часть неудач в nuPlan связана с взаимодействиями эго и других машин. Чтобы модель лучше с ними справлялась, авторы адаптируют функцию потерь и добавляют вспомогательную задачу.
За основу берётся временное перевзвешивание: ошибки в ближайшем будущем важнее ошибок на дальнем горизонте. Но у такого подхода есть побочный эффект: важное взаимодействие, которое случится нескоро, тоже получает маленький вес.
Чтобы это исправить, по реальным траекториям ищутся интервалы взаимодействия: участки, где пути эго и другого агента проходят через одну область. Не обязательно одновременно, ведь важно в том числе научиться решать, кто проедет первым. На этих интервалах вес ошибки траектории эго возвращают к максимальному.
Вспомогательная задача заключается в том, чтобы предсказывать движение других агентов с учётом запланированной траектории эго. Обратно в планировщик эти предсказания не поступают, но помогают энкодеру лучше понимать сцену.
Итоги
Основной прирост, судя по экспериментам самих авторов, даёт вовсе не MoE, а блок взаимодействия с другими агентами. Использование явных экспертов и якорей закладывает в модель сильные предположения о том, как устроено вождение. На небольшом датасете nuPlan это может сработать, но на более разнообразных данных модель вероятно выучит эти паттерны сама, причём лучше.
Занимательно, что во введении авторы ругают rule-based-подходы за дорогую поддержку правил, а потом возвращают правила через разметку семи сценариев. При этом не указывают, насколько точно модель различает эти сценарии. А это важно: если роутер ошибся, в работу пойдут и не тот эксперт, и не те якоря.
И ещё странность: статью о взаимодействии проверяли в режиме, где другие машины на эго не реагируют, а просто едут по записанным траекториям.
Тем не менее, статья и идея интересные. Но пока всё проверено только в довольно урезанном режиме симуляции, так что к результатам стоит относиться с осторожностью.
Разбор подготовил
404 driver not found