李飛飛團隊提出ReKep,讓機器人具備空間智能,還能整合GPT-4o

近日,李飛飛團隊在這一研究方向取得了一個突破,提出了關係關鍵點約束(ReKep/Relational Keypoint Constraints)。簡單來說,該方法就是將任務表示成一個關係關鍵點序列。並且,這套框架還能很好地與 GPT-4o 等多模態大模型很好地整合。該團隊也已發佈相關代碼。本文一作爲 Wenlong Huang。

李飛飛表示,該工作展示了視覺與機器人學習的更深層次融合!雖然論文中沒有提及李飛飛在今年 5 年初創立的專注空間智能的 AI 公司 World Labs,但 ReKep 顯然在空間智能方面大有潛力。