Ai2 представила ToyBlocks — открытую среду с роботизированной рукой и кубиками на столе. В ней можно обучать модели толкать, переворачивать и складывать предметы, менять условия задачи и сравнивать результаты. Демонстрации успешных действий генерируются автоматически, без ручного управления роботом для каждой записи.
Исследователь может изменить размеры кубиков, высоту стола, расположение предметов или состав обучающих примеров. Затем модель проверяют на новых сочетаниях условий. Отдельные инструменты позволяют различить ошибку планирования и сбой при выполнении движения.
Ai2 открыла код, данные, модели и документацию. Через веб-интерфейс к среде можно подключить языковую модель и давать роботу инструкции обычными словами. ToyBlocks рассчитана на контролируемые эксперименты: простой набор предметов позволяет повторять испытания и прослеживать причины неудач.
Комментарии
Увлечённо обсуждая, не забывайте про уважение.
Загружаем комментарии…