Waymo представила фреймворк эвалуации ИИ-моделей для автономного транспорта

Инженеры компании Waymo разработали стандартизированную систему эвалуации (evals) ИИ-моделей, управляющих автономными роботакси. Согласно новой концепции, высокий результат на базовых выборках не является основанием для допуска алгоритма к реальным поездам.

Многоуровневое тестирование безопасности

Новый фреймворк оценивает не точечную точность предсказания траектории, а целостное поведение беспилотника в экстремальных дорожных ситуациях. Модели проходят тысячи симулированных сценариев, воспроизводящих сложные погодные условия и непредсказуемые действия пешеходов.

Отказ от традиционных бенчмарков

В компании подчеркивают, что общепринятые метрики машинного обучения не отражают реальную надежность критически важных систем. Готовность ИИ-проекта определяется исключительно прохождением специализированных поведенческих тестов безопасности.

Расширение полигонов испытаний

Внедрение строгой системы эвалуации позволило Waymo возобновить и расширить коммерческое тестирование автономных автомобилей на скоростных шоссе и в густонаселенных городских районах без участия страховочного водителя.

Источники

• VentureBeat, 2026-07-29
• TechCrunch, 2026-07-29