Mobilitybench: новый бенчмарк для оценки ai-агентов

Мобильность становится все более важной для систем искусственного интеллекта, но оценка агентов планирования маршрутов в реалистичных условиях остается сложной задачей. Чтобы решить эту проблему, мы представляем MobilityBench, новый бенчмарк для оценки агентов планирования маршрутов в реальных сценариях мобильности.

MobilityBench: новый бенчмарк

MobilityBench использует данные о трафике из реального мира и позволяет создавать различные сценарии, включая пробки, перекрытия дорог и изменения дорожных условий. Бенчмарк охватывает несколько городов и включает в себя данные о различных видах транспорта, таких как автомобили, велосипеды и пешеходы. Агенты оцениваются по различным показателям, таким как время в пути, пройденное расстояние и соблюдение правил дорожного движения.

Мы предоставили базовые реализации агентов, чтобы облегчить начало работы с MobilityBench, и надеемся, что он поможет продвинуть исследования в области планирования маршрутов и мобильности. Доступ к бенчмарку и дополнительная информация доступны по ссылке MobilityBench.