創(chuàng)澤機器人
CHUANGZE ROBOT
當前位置:首頁 > 新聞資訊 > 機器人應用 > 基于深度學習框架的機器人觸覺感知研究

基于深度學習框架的機器人觸覺感知研究

來源:--     編輯:創(chuàng)澤   時間:2020/4/30   主題:其他 [加盟]

機器人通過收集大量觸覺數(shù)據(jù)來識別物體的方法存在一定的限制。一方面機器人觸覺傳感器收集大量物體的觸覺數(shù)據(jù)過程資源耗費大,另一方面日常生活能接觸到的物體種類龐大。近期在IEEE TRANSACTIONS ON INDUSTRIAL INFORMATICS發(fā)表的一篇《A Deep Learning Framework forTactile Recognition of Known as Well as Novel Objects》文章中提出了一種基于卷積神經網絡的綜合觸覺識別框架,它可以利用對象的語義屬性描述和觸覺數(shù)據(jù)的融合來實現(xiàn)對新對象的識別。相對于傳統(tǒng)學習方法有較大優(yōu)勢,因為語義信息更容易獲得,可以由人工[1]提供,也可以從語義數(shù)據(jù)庫(如Wikipedia[2])自動挖掘。

1、機器人觸覺識別總體框架

文中設計的總體識別框架,如圖1所示。首先從觸覺數(shù)據(jù)出發(fā),可以將一個物體識別為一個已知的物體(之前接觸過的)或一個新的物體。已知對象的識別是利用訓練數(shù)據(jù)構建的多類分類器來實現(xiàn)的,而新奇對象的識別依賴于基于屬性的ZSL方法。此外,通過一次學習(one-shotlearning, OSL),只從一個訓練樣本開始,就可以實現(xiàn)觸覺數(shù)據(jù)的合成。

2. 特征生成器G

用訓練集訓練一個包含CONVXF和FCFY的神經網絡CNNXY對Y進行分類。利用語義屬性向量訓練一個反卷積神經網絡G來合成觸覺特征。為提高特征生成器G的品質,使合成的觸覺特征盡可能接近從真實觸覺數(shù)據(jù)中提取的特征。文中加入另一個卷積神經網絡D來對抗訓練G,其中D用來區(qū)分合成觸覺特征或者真實的觸覺特征。利用訓練好的G,合成觸覺特征。

3.  平臺搭建

文中使用語義屬性集:A ={吸收性、凹凸性、可壓縮性、冷熱、模糊性、硬的、多毛的、金屬的、多孔的、粗糙的、光滑的、柔軟的、固體的、有彈性的、濕軟的、有紋理的、厚的}。使用公開的PHAC-2數(shù)據(jù)集,該數(shù)據(jù)集包含60種物體每一種都在[4]中進行了10次試驗。數(shù)據(jù)通過SynTouch BioTac觸覺傳感器獲得。對BioTac讀數(shù)進行預處理,并按照[5]中使用BioTac讀數(shù)對A中包含的屬性進行二元分類,獲得了一個由6000個樣本組成的原始觸覺數(shù)據(jù)集(60種物體每種10個樣本進行10次試驗)。

文中隨機選擇6個對象作為Z,54個作為Y,為了確保系統(tǒng)對Y和Z選擇具有魯棒性,這個隨機過程重復了七次以生成不同的Z和Y。表1為文中使用的網絡架構。FCFY和FCFZ都是單層全連接網絡。在卷積層之后是針對非線性的ReLU激活函數(shù)。卷積層和全連接層的權值都使用Xavier方法[6]進行初始化,所有反卷積層都使用Gaussian初始化器進行初始化。文中用softmax函數(shù)和多項式邏輯損失訓練完全連接層,用交叉熵損失訓練D。


4. 實驗評估

1)目標分類

圖2給出了PHAC-2對象及其屬性的例子,以及split 1的測試對象。雖然測試對象(用藍色框起來)在語義上與訓練對象不同,但是這兩個集合共享相同的屬性,每個測試對象都有區(qū)別于其他對象的屬性向量。驗證了Z和Y之間的共享屬性,驗證了中每個對象的屬性向量的唯一性,從而允許使用文中框架來執(zhí)行ZSL。


圖2 PHAC-2對象及其屬性示例

2)已知對象的多重分類

從每個中隨機選取10個樣本作為測試數(shù)據(jù),剩下的90個樣本用于訓練CNNXY。表2表示了該框架達到的識別精度。我們可以看到,識別精度是非常高的。這個結果很重要,因為它影響了CONVXF的訓練,從而也影響了對新對象的識別。

表2 的多類分類的識別精度(%)

 

3)合成觸覺特征的評估

如果缺少真實的訓練數(shù)據(jù),則利用合成的特征來訓練識別系統(tǒng)。因此,可以單獨使用合成特征對框架進行訓練并使用真實特征進行測試,以未知目標識別的準確性程度來評估合成觸覺特征的質量。在表3中,測試了在使用真實觸覺特征和使用合成觸覺特征替代真實觸覺特征這兩種情況下,系統(tǒng)的識別表現(xiàn)。

表3 使用每個類0、10、50、90或100個樣本訓練FCFZ后,多類分類(真實觸覺特征訓練)和ZSL(合成觸覺特征)的識別準確率(%)


從表4中很明顯看到,使用真實觸覺特征進行訓練的效果明顯優(yōu)于合成觸覺特征訓練。但是,在沒有真實觸覺信息可用的情況下,多類分類器是無法區(qū)分對象的,會按平均概率進行分類。然而,對于所有的對象分類,ZSL卻可以給出一個高于概率的分類精度。還有,增加訓練的合成觸覺特征樣本數(shù)量并不會提高準確度,這可能是因為每個類的合成觸覺特征都是由相同的屬性向量(通過添加少量的噪聲)合成的,這種相似性,為一個對象生成多個特征會導致過擬合。文中還分析了使用對抗神經網絡的必要性,如果跳過算法2和僅使用算法1訓練生成器,那么系統(tǒng)性能會下降,這是因為合成的觸覺數(shù)據(jù)與真實觸覺數(shù)據(jù)有較大差別。

表4有GAN和無GAN的ZSL識別精度(%)


5. 總結

這篇論文設計了一個觸覺識別框架,利用觸覺數(shù)據(jù)能夠識別已知和未知對象。在對未知對象的識別分類上,精度達到36%,這是傳統(tǒng)訓練模式達不到的。此外,該框架有效利用輸入的數(shù)據(jù),如果有足夠的數(shù)據(jù)可用時,可以達到較高的多類分類精度。該框架仍然存在一些限制,首先領域移位問題[7]和語義屬性空間與觸覺特征空間的相關性限制了對新對象的識別。此外該框架能夠識別的新類集合必須是已知的,添加新類需要修改FCFZ的輸出層,同理添加新屬性需要修改的輸入層。此外,文中使用了由[4]設計的語義二進制屬性。探討非語義屬性和實值屬性可以提高[8]、[9]識別的準確性和泛化能力。最后,文中只根據(jù)觸覺數(shù)據(jù)來識別物體,可以結合視覺進一步拓展,如在[10],[11]?紤]到CNN在圖像識別和生成[12]方面的良好表現(xiàn),視觸覺融合識別可以顯著提高識別性能,這是非常有研究價值的。






機器人抗擊傳染病

新冠病毒凸顯了機器人在與傳染病對抗中的重要作用,機器人不會感染傳染病

機器人遙操作

機器人遙操作已廣泛應用在醫(yī)療領域、極端環(huán)境探索如太空與深海場景、防恐防爆應用場景,及基于工業(yè)機械臂的自動化生產中

康復外骨骼機器人具有廣闊的市場前景

國外外骨骼機器人的研究早于國內,商業(yè)化水平也高,我國是繼美國、以色列和日本之后,第四個成功研發(fā)外骨骼機器人的國家

多地形環(huán)境下無拐支撐的新一代步行外骨骼機器人

新一代下肢康復外骨骼機器人自主研發(fā),可以實現(xiàn)無拐杖輔助下平地行走、跨越障礙、轉彎以及上下樓梯等場景,幫助穿戴者釋放上肢負擔,擴大運動范圍、增加平衡性和安全性

2019中國人工智能商業(yè)落地典型企業(yè)案例-YOGO ROBOT

機器人商業(yè)落地案例YOGO ROBOT,YOGO與寶山區(qū)政府合作,打造機器人智慧樓宇集群。

機器人的高精度抓取和裝配

高精度機器人操控的五類方法:(1)基于傳感信息的方法(2)基于柔順機構的方法(3)基于環(huán)境約束的方法(4)基于感知約束集成的方法(5)仿生的方法

在高動態(tài)的餐飲場景下提供配送機器人方案

配送機器人綜合了SLAM、智能導航避障、多機調度、人機交互等人工智能技術,為餐廳、酒店、樓宇等廣泛場景提供配送機器人解決方案,在高動態(tài)的商業(yè)環(huán)境下精確建圖和定位,實現(xiàn)高效運行,降低企業(yè)成本

結合人工智能技術,5G+MR全息教室創(chuàng)新教學模式

基于計算機視覺的智能識別技術 和SLAM定位技術的引入,則實現(xiàn)了目標與用戶的動態(tài)精準識別和交互。能夠輔助課堂教學,提升遠程教學和溝通效率,營造場景化教學新體驗

火爆的貨箱倉儲機器人

多臺貨箱到人機器人正在運行,攜帶著貨箱輕巧敏捷地來回穿梭于存儲區(qū)和工位之間,高速完成美妝產品的存揀作業(yè)。這是業(yè)內首個多層貨箱到人機器人解決方案的落地應用,相較同等面積的人工倉,效率提升2.5倍。

下肢外骨骼機器人步態(tài)建模及其控制方法研究

在下肢外骨骼機器人的穩(wěn)定性評估、步態(tài)規(guī)劃和平衡控制中,人機系統(tǒng)質心是重要的參數(shù)之一

機器人輔助穿衣過程中用戶上肢運動實時追蹤方法

機器人輔助穿衣過程中,使用一種多傳感器信息融合的人體骨骼實時追蹤方法,使機器人既可以基于力的信息自動改變運動軌跡從而保證用戶安全,又可以完成穿衣任務

機器人常用避障傳感器

避障使用的傳感器各種各樣,其特點和適用范圍也不同。根據(jù)不同的原理,可分為:超聲波傳感器、紅外傳感器、激光傳感器和視覺傳感器等
資料獲取
機器人應用
== 最新資訊 ==
ChatGPT:又一個“人形機器人”主題
ChatGPT快速流行,重構 AI 商業(yè)
中國機器視覺產業(yè)方面的政策
中國機器視覺產業(yè)聚焦于中國東部沿海地區(qū)(
從CHAT-GPT到生成式AI:人工智能
工信部等十七部門印發(fā)《機器人+應用行動實
全球人工智能企業(yè)市值/估值 TOP20
創(chuàng)澤智能機器人集團股份有限公司第十一期上
諧波減速器和RV減速器比較
機器人減速器:諧波減速器和RV減速器
人形機器人技術難點 高精尖技術的綜合
機器人大規(guī)模商用面臨的痛點有四個方面
青島市機器人產業(yè)概況:機器人企業(yè)多布局在
六大機器人產業(yè)集群的特點
機械臂-高度非線性強耦合的復雜系統(tǒng)
== 機器人推薦 ==
迎賓講解服務機器人

服務機器人(迎賓、講解、導診...)

智能消毒機器人

智能消毒機器人

機器人開發(fā)平臺

機器人開發(fā)平臺


機器人招商 Disinfection Robot 機器人公司 機器人應用 智能醫(yī)療 物聯(lián)網 機器人排名 機器人企業(yè) 機器人政策 教育機器人 迎賓機器人 機器人開發(fā) 獨角獸 消毒機器人品牌 消毒機器人 合理用藥 地圖
版權所有 創(chuàng)澤智能機器人集團股份有限公司 中國運營中心:北京 清華科技園九號樓5層 中國生產中心:山東日照太原路71號
銷售1:4006-935-088 銷售2:4006-937-088 客服電話: 4008-128-728