搜尋
首頁科技週邊人工智慧中國學者開發看護機器人模擬環境,也做了真人實驗,獲IROS 2022最佳論文之一

10 月 23 日 - 27 日,機器人頂會 IROS 2022 在日本京都舉行。大會共收到了來自全球 57 個國家和地區的 3579 篇論文投稿,最終接收了 1716 篇,接收率達到了 47.9%。

中國學者開發看護機器人模擬環境,也做了真人實驗,獲IROS 2022最佳論文之一

其中,來自上海交通大學的盧策吾團隊與康乃爾大學、哥倫比亞大學的研究者聯合推出了看護機器人仿真環境RCareWorld。這項工作獲得 IROS 2022 會議六個最佳論文獎項之一的最佳 RoboCup 論文。

兩篇 Best RoboCup 論文。來源:Twitter@ctwy

  • 論文網址:https://arxiv.org/pdf/2210.10821.pdf
  • #Github 網址:https://github.com/empriselab/RCareWorld
  • 論文首頁:https://emprise.cs.cornell.edu/rcareworld/

根據WHO 數據顯示,全世界有1.9 億人有不同程度的行動限制,需要照顧者的幫助才能獲得較高的生活品質。目前,世界主要國家逐漸進入不同程度的老齡化社會,對護理人員的需求急劇上升,而相關人才的培養需要長期的投入,因此,設計看護機器人是可能的解決方案。

但是,照顧機器人領域的發展面臨著重重困難,例如:

1. 前沿研究者缺少被照顧者和照顧者的第一人稱真實需求的研究累積(任務、演算法、數據)。

2. 真實機器人本體的開發、部署、運作和維護所需的開銷也十分高昂。

3. 此領域研究的實驗需要在理解被照顧者日常活動需求後,有針對性地進行改造,大大增加研究成本。

因此,一個能高度擬真看護場景的模擬平台,能大幅降低進入該研究領域的門檻,使得該領域的研究更容易展開和學術同行間比較。

和以往用於通用機器人的模擬環境不同,RCareWorld 團隊同時吸收了來自看護場景相關人員,和機器人研究學者的建議,對機器人所需學習的技能、虛擬人建模、活動場景設計、功能性介面等提供了充分的支援。

機器人看護技能

作者在模擬環境中對常見的看護任務進行了基準測試:餵食、穿衣、擦拭身體、四肢重擺、幫助移動、幫助上衛浴等。

中國學者開發看護機器人模擬環境,也做了真人實驗,獲IROS 2022最佳論文之一

此外,作者進行了兩個真實世界實驗:

##1. 將擦拭身體這個任務中學到的策略直接移到真機實驗中。

中國學者開發看護機器人模擬環境,也做了真人實驗,獲IROS 2022最佳論文之一

#2. 真實世界中的社群照顧任務:作者用行為樹程式設計的NAO 機器人作為教練,透過VR 介面來引導被照顧者的肢體復原。

中國學者開發看護機器人模擬環境,也做了真人實驗,獲IROS 2022最佳論文之一

完整虛擬人建模:肌肉骨骼、軟組織、關節活動範圍 

肌肉骨骼系統

人體的肌肉骨骼系統,會接收來自神經系統的活化訊號,以此決定對肌肉的收縮或舒張,從而帶動骨頭關節的運動。過程,作者使用 Hill-type 肌肉模型建模,參考 OpenSim 資料庫的相關數據,完成肌肉在人體模型的設定。

中國學者開發看護機器人模擬環境,也做了真人實驗,獲IROS 2022最佳論文之一

中國學者開發看護機器人模擬環境,也做了真人實驗,獲IROS 2022最佳論文之一

軟體組織

另一方面,當人體關節運動時,會造成表面軟組織形變,作者用基於XPBD 的模擬技術對這一部分進行了建模。這些軟組織,不僅存在於表面,也存在於口腔。在口腔中,作者對舌頭也進行了建模。如圖,當草莓放到人的口腔中,他的舌頭隨之形變。

中國學者開發看護機器人模擬環境,也做了真人實驗,獲IROS 2022最佳論文之一

關節活動範圍

當人受到一些損傷,如脊椎損傷(C1-C3, C4-C5, C6- C7)、腦性麻痺、半身麻痺、腦中風等,身體關節的活動性會受到極大的影響,運動模式也會改變。作者根據來自臨床的數據,建模了人體受到此類損傷後對應的關節活動。

中國學者開發看護機器人模擬環境,也做了真人實驗,獲IROS 2022最佳論文之一

活動場景:無障礙性的三個層次

根據活動場景的無障礙性,給場景分出三等級:

  • 常規(L1):此時不需要進行改造。
  • 部分無障礙(L2):此時部分物件需被移除,使用不便的工具或零件需被替換,如旋轉式的門把手需被替換成按壓式,或門整個替換成滑動門。
  • 完全無障礙(L3):此時所有活動區域都應是可通過和可到達的,可能要涉及樓梯、過道加寬,上懸櫥櫃下拉,檯面下方掏空等改造。

全面的修改方案參考自《通用設計指南》(Universal Design Manual)。根據《通用設計指南》的指導,作者修改了 16 間房子。房子模型選自 Matterport3D 資料集,總共包括 17 個廚房、17 個客廳、59 間臥室、16 個餐廳、70 間浴室、18 個休息室和 41 個其它房間。在房子中合適的區域,都配有病床、病人吊索、輪椅等醫療輔助設備。

中國學者開發看護機器人模擬環境,也做了真人實驗,獲IROS 2022最佳論文之一

功能性介面:模型、感測、互動介面

根據機器人研究學者的建議,模擬環境應該:

1. 支援控制常見的看護機器人模型:包括HSR、Stretch、Nao、Fetch、Kinova、Franka、UR 等。

中國學者開發看護機器人模擬環境,也做了真人實驗,獲IROS 2022最佳論文之一

2. 提供多模態感測:RGB,深度、LiDAR、關節和末端力感測、全臂觸覺感知。

中國學者開發看護機器人模擬環境,也做了真人實驗,獲IROS 2022最佳論文之一

#

中國學者開發看護機器人模擬環境,也做了真人實驗,獲IROS 2022最佳論文之一

中國學者開發看護機器人模擬環境,也做了真人實驗,獲IROS 2022最佳論文之一

3. 具有多種互動控制介面和接口,支援規劃、控制和學習演算法,便於開發者使用:Python、ROS、VR。

上海交大推出具身智慧平台RobotFlow/RFUniverse

#RCareWorld 專案基於 RFUniverse 模擬平台開發。 RFUniverse 是由上海交通大學盧策吾教授團隊發起推出的具身智慧平台 RobotFlow 旗下的多物理機器人模擬平台。此模擬平台支援包括食物切割、衣服折疊等任務在內的高階機器人操作任務。對剛體、關節體、柔性體、流體等物體類型提供支援。上海交通大學MVIG盧策吾團隊,長期研究具身智能,電腦視覺,團隊在《自然》,《自然. 機器智能》,TPAMI,ICRA,IROS上發表論文一百多篇,形成GraspNet(Anygrasp),Aphapose, HAKE等知名機器人學習,電腦視覺系統。

現已開源:https://github.com/mvig-robotflow/pyrfuniverse

RCareWorld 論文共同第一作者徐文強博士是此系統核心人員。

共同第一作者介紹

葉若琳,上海交通大學電子系本科,康乃爾大學計算機系一年級在讀博士生,師從 Tapomayukh Bhattacharjee 教授。研究方向為人與機器人互動。 RCareWorld 的主要工作完成於她在上海交通大學 MVIG 實驗室(導師盧策吾)實習期間。

徐文強,上海交通大學 MVIG 實驗室四年級在讀博士生,師從盧策吾教授。研究方向為具身智能。在實驗室內領導 RobotFlow 項目,其中包括多物理機器人模擬平台 RFUniverse,這是 RCareWorld 的基礎。

  • RobotFlow 專案:https://robotflow.ai
  • RFUniverse 平台:https ://sites.google.com/view/rfuniverse

以上是中國學者開發看護機器人模擬環境,也做了真人實驗,獲IROS 2022最佳論文之一的詳細內容。更多資訊請關注PHP中文網其他相關文章!

陳述
本文轉載於:51CTO.COM。如有侵權,請聯絡admin@php.cn刪除
10個生成AI編碼擴展,在VS代碼中,您必須探索10個生成AI編碼擴展,在VS代碼中,您必須探索Apr 13, 2025 am 01:14 AM

嘿,編碼忍者!您當天計劃哪些與編碼有關的任務?在您進一步研究此博客之前,我希望您考慮所有與編碼相關的困境,這是將其列出的。 完畢? - 讓&#8217

烹飪創新:人工智能如何改變食品服務烹飪創新:人工智能如何改變食品服務Apr 12, 2025 pm 12:09 PM

AI增強食物準備 在新生的使用中,AI系統越來越多地用於食品製備中。 AI驅動的機器人在廚房中用於自動化食物準備任務,例如翻轉漢堡,製作披薩或組裝SA

Python名稱空間和可變範圍的綜合指南Python名稱空間和可變範圍的綜合指南Apr 12, 2025 pm 12:00 PM

介紹 了解Python函數中變量的名稱空間,範圍和行為對於有效編寫和避免運行時錯誤或異常至關重要。在本文中,我們將研究各種ASP

視覺語言模型(VLMS)的綜合指南視覺語言模型(VLMS)的綜合指南Apr 12, 2025 am 11:58 AM

介紹 想像一下,穿過​​美術館,周圍是生動的繪畫和雕塑。現在,如果您可以向每一部分提出一個問題並獲得有意義的答案,該怎麼辦?您可能會問:“您在講什麼故事?

聯發科技與kompanio Ultra和Dimenty 9400增強優質陣容聯發科技與kompanio Ultra和Dimenty 9400增強優質陣容Apr 12, 2025 am 11:52 AM

繼續使用產品節奏,本月,Mediatek發表了一系列公告,包括新的Kompanio Ultra和Dimenty 9400。這些產品填補了Mediatek業務中更傳統的部分,其中包括智能手機的芯片

本週在AI:沃爾瑪在時尚趨勢之前設定了時尚趨勢本週在AI:沃爾瑪在時尚趨勢之前設定了時尚趨勢Apr 12, 2025 am 11:51 AM

#1 Google推出了Agent2Agent 故事:現在是星期一早上。作為AI驅動的招聘人員,您更聰明,而不是更努力。您在手機上登錄公司的儀表板。它告訴您三個關鍵角色已被採購,審查和計劃的FO

生成的AI遇到心理摩托車生成的AI遇到心理摩托車Apr 12, 2025 am 11:50 AM

我猜你一定是。 我們似乎都知道,心理障礙由各種chat不休,這些chat不休,這些chat不休,混合了各種心理術語,並且常常是難以理解的或完全荒謬的。您需要做的一切才能噴出fo

原型:科學家將紙變成塑料原型:科學家將紙變成塑料Apr 12, 2025 am 11:49 AM

根據本週發表的一項新研究,只有在2022年製造的塑料中,只有9.5%的塑料是由回收材料製成的。同時,塑料在垃圾填埋場和生態系統中繼續堆積。 但是有幫助。一支恩金團隊

See all articles

熱AI工具

Undresser.AI Undress

Undresser.AI Undress

人工智慧驅動的應用程序,用於創建逼真的裸體照片

AI Clothes Remover

AI Clothes Remover

用於從照片中去除衣服的線上人工智慧工具。

Undress AI Tool

Undress AI Tool

免費脫衣圖片

Clothoff.io

Clothoff.io

AI脫衣器

AI Hentai Generator

AI Hentai Generator

免費產生 AI 無盡。

熱門文章

R.E.P.O.能量晶體解釋及其做什麼(黃色晶體)
3 週前By尊渡假赌尊渡假赌尊渡假赌
R.E.P.O.最佳圖形設置
3 週前By尊渡假赌尊渡假赌尊渡假赌
R.E.P.O.如果您聽不到任何人,如何修復音頻
3 週前By尊渡假赌尊渡假赌尊渡假赌
WWE 2K25:如何解鎖Myrise中的所有內容
4 週前By尊渡假赌尊渡假赌尊渡假赌

熱工具

MantisBT

MantisBT

Mantis是一個易於部署的基於Web的缺陷追蹤工具,用於幫助產品缺陷追蹤。它需要PHP、MySQL和一個Web伺服器。請查看我們的演示和託管服務。

記事本++7.3.1

記事本++7.3.1

好用且免費的程式碼編輯器

MinGW - Minimalist GNU for Windows

MinGW - Minimalist GNU for Windows

這個專案正在遷移到osdn.net/projects/mingw的過程中,你可以繼續在那裡關注我們。 MinGW:GNU編譯器集合(GCC)的本機Windows移植版本,可自由分發的導入函式庫和用於建置本機Windows應用程式的頭檔;包括對MSVC執行時間的擴展,以支援C99功能。 MinGW的所有軟體都可以在64位元Windows平台上運作。

PhpStorm Mac 版本

PhpStorm Mac 版本

最新(2018.2.1 )專業的PHP整合開發工具

SublimeText3漢化版

SublimeText3漢化版

中文版,非常好用