技術名稱 整合認知功能以提升理解與決策能力之生成式AI居家服務型機器人
計畫單位 國立成功大學
計畫主持人 李祖聖
技術簡介
本系統結合LLM、VLM、物件與骨架辨識技術,實現環境感知、動態任務規劃、變化監控、物件重排列以及人機互動,準確執行自然語意指令並持續迭代,提升居家服務機器人在複雜場域中的適應性與可靠性。即時實驗驗證生成式AI於語意理解、互動及規劃之潛力及應用價值。
科學突破性
本系統創新結合零樣本推理、多模態深度整合與回饋機制,在真實環境下達成76.6動態任務成功率、70餐具重排列成功率及74人機互動成功率,顯著優於主流50–60基準,展現卓越語意理解、動態決策與交互能力,具高度創新與產業化潛力。
產業應用性
結合生成式AI與多模態技術,本系統具備動態提示任務規劃器,能於動態環境調整作業流程,提升產線自主性,適用人機協作與非結構化場景,而物件重排列系統能實現機器人依照國際標準自動擺放餐具的能力,另外多模態人機互動系統強化使用體驗,讓使用者與機器人的互動更自然多樣,適用製造、倉儲、居家服務、醫療陪護等領域。
  • 聯絡人
  • 謝文怡