В проекте DrivingBench трое специалистов по информатике загрузили передовые модели — GPT-6, Grok 4.6 и Claude Fable 5.1 в «мозги» Toyota Corolla, чтобы проверить, смогут ли они проехать круг по трассе на парковке. Ноутбук с интернетом взаимодействовал с устройством «Комма-четыре», подключённым к системам управления Toyota. Модели отправляли команды на основе телеметрии GPS и показателей вроде угла поворота руля и колёс. Только GPT-6 Astra смогла полностью пройти трассу со второй попытки за пять минут — черепашья скорость для расстояния менее ста пятидесяти метров. У остальных большинство попыток заканчивалось тем, что модель «не могла проехать дальше первого поворота».
Тем не менее впервые удалось заставить систему работать после попыток с моделями прошлых поколений. ИИ-модели могут управлять реальными машинами на низких скоростях, но требуют дополнительной работы над безопасностью, согласованностью и оценкой. При этом полный раунд стоил 7,74 доллара за 6,6 миллиона токенов — большие вычислительные затраты даже при скорости 0,94 мили в час. Исследователи уверены, что со временем нейросети станут более совершенными и не будут столь дороги при решении таких нестандартных задач.
Любопытно, что некоторые модели предупреждали, что могут не справиться, и их пришлось уговаривать сесть за руль. Так, GPT-6 Astra отказывалась управлять реальным автомобилем, ссылаясь на безопасность даже на пустой парковке, после напоминания обо всех мерах, включая ограничение скорости и готовность пилота в машине нажать на тормоз. Вывод:
Пока передовые модели ИИ далеки от того, чтобы отвезти кого-то утром на работу, и, учитывая последствия для безопасности и юриспруденции, это, наверное, и к лучшему.
Российские инженеры научили нейросети общаться без текста и слов.