Стартап DAIMON Robotics под руководством Майкла Ю Вана выпустил омнимодальный набор данных для физического интеллекта. Цель — чтобы роботизированные руки могли ощущать мир как люди, интегрируя осязание с другими сенсорными сигналами для достижения ловкого манипулирования в реальных и неструктурированных средах.
Тактильные данные для более точного манипулирования 🤖
Набор данных объединяет информацию с камер, датчиков силы и контакта, а также данные о положении и крутящем моменте каждого сустава. Это позволяет роботизированным моделям учиться адаптировать давление и захват в зависимости от объекта. Ван стремится преодолеть текущее ограничение роботов, которые работают вслепую при выполнении тонких задач. С этой базой данных системы могут предвидеть трение и деформацию материалов, приближаясь к человеческой ловкости в производстве и ассистировании.
День, когда твой робот перестанет давить хлеб для тостов 🍞
До сих пор попросить робота взять яйцо было кулинарной русской рулеткой. С этим набором данных, возможно, они перестанут обращаться с клубникой как с кирпичами. Конечно, ещё предстоит увидеть, научатся ли они не путать человеческую руку с пробиркой. Тактильная революция обещает меньше разбитых предметов, хотя ирония в том, что первый робот с тонким осязанием, вероятно, использует его, чтобы избегать заправки постели.