国产无遮挡色视频免费视频-国产五月色婷婷综合-国产五月婷婷-国产午夜不卡-曰批免费视频播放在线看片二-曰韩一级毛片

更多精彩 >

星動紀元端到端原生機器人大模型ERA-42正式亮相,引領具身大模型進入靈巧操作時代

2024-12-23 12:32:36   來源:華夏晚報  作者: 

摘要:這是業界首次僅通過同一個具身大模型就實現了五指靈巧手像人手一樣使用多種工具完成上百種靈巧復雜操作任務,展現了ERA-42行業領先的通用、靈巧操作能力。

導語:近期,星動紀元端到端原生機器人大模型ERA-42正式亮相,即“紀元原生機器人大模型”,寓意著不斷探索宇宙萬物的終極答案,展示了其與自研五指靈巧手星動XHAND1結合后的靈巧操作能力,已學會了使用不同工具完成100多種復雜靈巧的操作任務,并且持續在同一個模型下學習新的技能。例如,拿起桌上螺釘鉆鉆緊螺釘、用錘子敲打釘子、將水杯扶正后再往水杯中倒水等任務。

圖片1.jpg

基于ERA-42,星動XHAND1能用不同工具完成多種靈巧操作新任務

這是業界首次僅通過同一個具身大模型就實現了五指靈巧手像人手一樣使用多種工具完成上百種靈巧復雜操作任務,展現了ERA-42行業領先的通用、靈巧操作能力。模型不需要任何預編程技能,完全基于其強大的泛化和自適應力,能在不到2小時內通過收集少量數據就學會執行新的任務。同時,ERA-42還在快速不斷學習更多新技能中。

圖片2.jpg

基于ERA-42,星動XHAND1可完成100多種精細化、智能化的五指靈巧手操作任務

ERA-42也是世界范圍內首個真正的五指靈巧手具身大模型,開啟了具身大模型的通用靈巧操作時代。

1. “真正”的具身大模型才是開啟通用具身智能體的密鑰,需要具備以下三個要素:

一是統一一個模型泛化多種任務和環境:通過構建一個統一的原生模型,融合視覺、語言、觸覺和身體姿態等全模態信息,實現對不同任務和環境的泛化能力。

二是端到端:從接收全模態數據,到生成最終輸出(如決策、動作等),通過一個簡潔的神經網絡鏈路完成。該過程無需人為設計特征、預編程或干預處理步驟,使得具身智能體能夠實時適應不同任務和環境,顯著提升靈活性與開發效率。

三是Scaling up(規模化):真正的統一的端到端算法才允許模型通過持續的數據積累實現自我完善,使得具身大模型在數據量指數級增長的同時,不僅提升性能,還能在未知任務中展現卓越的自適應和泛化能力。

例如,被行業廣泛熟知的Physical Intelligence (簡稱PI)發布的π0模型就具備上述要素,是典型的真正意義上的端到端具身大模型。

2. 星動紀元ERA-42是國內首個真正意義上的端到端原生機器人大模型,比肩世界領先水平

早期,星動紀元和PI幾乎同期采用了端到端算法來提升其原生機器人大模型性能,PI推出的π0模型,通過結合互聯網規模的視覺-語言預訓練與機器人操作數據集后訓練,使得機器人能夠在人類環境中自主執行多種復雜任務,這是機器人從特定任務的“專家”向多任務的“通才”發展歷程上的重要一步,也是具身大模型領域的一個里程碑。

圖片3.jpg

星動紀元早期發布的研究成果和Physical Intelligence (PI)幾乎不謀而合

星動論文HiRT: Enhancing Robotic Control with Hierarchical Robot Transformers發表在CoRL2024

而后,星動紀元又探索了另一條訓練道路,采用大規模視頻數據學習策略,涵蓋無標注的視頻數據、公開各類形態機器人的數據、人類活動數據以及遙操作數據等。并且,在上述數據的使用上,星動紀元不是直接模仿視頻里的人怎么去做,而是學習行動之后會產生什么樣的結果。這種方式使得學習效果不受限于數據質量,能大大降低數據收集成本,解決了數據消耗量巨大、需要大量高質量數據的行業難題。

此外,星動紀元的技術團隊已將世界模型融入原生機器人大模型中,使得模型不僅具備行動能力,還具備了對物理世界的理解能力,能夠對未來行動軌跡進行預測。

圖片4.jpg

后期,星動紀元探索了融合世界模型的原生機器人大模型

星動論文Prediction with Action: Visual Policy Learning via Joint Denoising Process發表在NeurIPS 2024

還能迅速響應外部干擾,并在任務執行過程中持續自適應優化行為,直至任務完成。提升了機器人執行任務的高效性和準確性。

星動紀元打造的端到端原生機器人大模型ERA-42憑借其預測能力,模型具備強大的泛化、自適應和規模化能力。結合星動紀元為AI打造的全新硬件平臺,可快速實現具身智能體軟硬件協同進化和商業化落地。

3. 星動紀元端到端原生機器人大模型ERA-42引領具身大模型進入通用靈巧操作時代

1)相比夾爪,星動XHAND1已經可以完成100多種精細化、智能化的復雜靈巧操作任務

相比夾爪,基于ERA-42能力,五指靈巧手能夠真正像人手一樣使用更多種多樣的工具,完成更通用、靈巧性更強、復雜度更高的百種以上操作任務。

圖片5.jpg

基于ERA-42,五指靈巧手星動XHAND1相比夾爪能使用更多不同工具執行更靈巧操作

2)星動紀元原生機器人大模型ERA-42能理解物理世界和預測未來

融合世界模型后,ERA-42具備對物理世界的理解以及對未來的預測的能力,從而大幅提升了泛化能力和任務成功率。

例如,下圖中上方的圖片展示了真實物理世界中打開冰箱的逐幀操作,下方的圖片則為ERA-42生成的環境建模與對打開冰箱任務的逐幀預測。可以看到兩張圖片非常接近,說明模型預測非常準確。這與其他機器人大模型直接學習行動、而忽視對世界本身理解的方式,或者僅將世界模型用于生成仿真數據的方式,存在本質的區別。

圖片6.jpg

真實世界執行任務和ERA-42預測執行任務對比圖

3)星動紀元原生機器人大模型ERA-42具備更強泛化能力

基于大規模視頻數據的預訓練,只需采集少部分數據,基于ERA-42的泛化能力,短時間內通過單一的策略靈巧手就能學會執行新的操作任務。此前,星動紀元技術團隊就通過這種訓練方式采集簡單的紅黃藍方塊抓取數據,成功實現了從未見過的多樣化物體(如胡蘿卜、茄子等)的抓取泛化,并相對其他模型算法在泛化任務上顯著提升了成功率。

圖片7.jpg

通過簡單彩色方塊的抓取數據實現多樣化物體的泛化抓取操作

4)星動紀元原生機器人大模型ERA-42具備更強自適應性

由于融合了世界模型,ERA-42不管在單任務上,還是長序列任務上都展現出了業內領先的強大抗干擾能力。

5)星動紀元原生機器人大模型ERA-42初步體現“Scaling效應”

并且研究結果表明,隨著模型規模的擴大,任務成功率也明顯提升,初步體現了和大語言模型訓練中類似的“Scaling效應”,即模型規模與性能之間的正相關性。

圖片8.jpg

“Scaling效應”顯示模型與機器人性能呈現正相關性

4.星動紀元端到端原生機器人大模型ERA-42和為AI打造的全新硬件平臺協同進化,共建原生具身智能體

構建通用具身智能體需要軟硬件協同迭代,就像人類的腦和身體是從小到大同步協同成長的一樣。

圖片9.jpg

構建原生通用具身智能體=原生機器人大模型+為AI定義的硬件平臺協同進化

因此,星動紀元打造了為AI定義的全新硬件平臺。以星動自研推出的五指靈巧手星動XHAND1為例,共有12個主動自由度,并采用純電驅方式,且每個自由度都有對應的驅動源,實現全自主五指關節驅動,能執行高精度任務。星動XHAND1每個手指配備一個高分辨率(>100點)觸覺陣列傳感器,提供精確的三維力觸覺和溫度信息。單手最大握力能達80N,負載可達25kg。

圖片10.jpg

星動XHAND1 —— 全自驅 真自由

星動XHAND1在作業能力上展現出的高性能在協同ERA-42后,為實現復雜靈巧操作任務奠定了基礎。

依托ERA-42,星動紀元通用人形機器人執行任務的通用性和泛化性將大幅提升,結合此前發布的在復雜多樣的地形上穩定行走和奔跑的運動性能,配合上下肢協同作業能力,潛在應用場景也將更加多元化,真正實現原生的通用具身智能體的產業化落地。


猜你喜歡

體育文化創新展活力,全國現存體育相關企業超41.4萬家

創新創業天眼查

體育文化創新展活力,全國現存體育相關企業超41.4萬家

10小時前

碳纖維材料“飛入”百姓家,全國現存新材料相關企業超65萬家

創新創業天眼查

碳纖維材料“飛入”百姓家,全國現存新材料相關企業超65萬家

10小時前

“續命”還是“促癌”?全國現存咖啡相關企業超24.6萬家

創新創業天眼查

“續命”還是“促癌”?全國現存咖啡相關企業超24.6萬家

10小時前

快遞包裝開啟綠色變革,全國現存環保包裝企業超10.9萬家

創新創業天眼查

快遞包裝開啟綠色變革,全國現存環保包裝企業超10.9萬家

10小時前

外聯出國:加拿大再掀移民風暴!部分崗位 LMIA申請叫停,這些人卻喜提移民加分!

創新創業外聯出國

6月27日,加拿大移民局拋出一枚“重磅炸彈”:臨時外國勞工計劃(TFWP)工資門檻全面上調

14小時前

AI賦能軟件測試:2025兩會后的智能化革命與行業新機遇

AI技術智能+

2025年兩會的召開,人工智能(AI)再次成為各界關注的焦點。

2025-03-14

車路云“北京方案”加速落地,示范區3.0項目中標結果公布

上市公司四維圖新

近日,北京市高級別自動駕駛示范區3.0范圍高精度地圖服務能力研發項目一期招標結果公布,四維圖新中標該...

2025-03-14

踐行“全民閱讀”國家戰略,句象書店打造復合型公共閱讀空間創新樣本

句象書店

全民閱讀作為我國建設社會主義文化強國的重要路徑,近年來得到國家的高度重視。

2025-03-14

數字華夏完成數千萬元天使+輪融資,同創偉業獨家投資

同創偉業數字華夏

數字華夏(深圳)科技有限公司(以下簡稱"數字華夏")今日宣布完成數千萬元天使+輪融資

2025-03-14

深度:人參肽包含多種人參皂苷

大消費人參肽

人參肽,人參皂苷,這兩者最直接的關系就是:人參肽中本身就含有多種人參皂苷,尤其是Rg3、Rh2,都有...

2025-03-14

億部立富硒人參肽與普通人參肽的差別

大消費億部立富硒人參肽

億部立富硒人參肽,絕非普通人參肽,兩者相比,億部立有以下幾個差別或者優勢

2025-03-14

2025老高電商圈子旗下金冠俱樂部開年盛典:“無界未來”點燃行業新希望

創新創業老高電商圈子

2025年3月14日-深圳,深耕電商行業多年的老高電商圈子主辦的“2025電商企業家開年盛典”,于2...

2025-03-14

渤海人壽“3·15”多措并舉構筑消保新生態

金融科技渤海人壽

連日來,圍繞“保障金融權益 助力美好生活”的“3·15”金融消費者權益保護教育宣傳活動主題,渤海人壽...

2025-03-14

投資家網(m.51baobao.cn)是國內領先的資本與產業創新綜合服務平臺。為活躍于中國市場的VC/PE、上市公司、創業企業、地方政府等提供專業的第三方信息服務,包括行業媒體、智庫服務、會議服務及生態服務。長按右側二維碼添加"投資哥"可與小編深入交流,并可加入微信群參與官方活動,趕快行動吧。

分化浪潮中的堅守與突破 | 第19屆中國投資年會,即將啟幕

分化浪潮中的堅守與突破 | 第19屆中國投資年會,即將啟幕

在時代的浩渺長河中,“分化”宛如一條隱匿的脈絡,貫穿于萬物的生長、發展與變遷。從生命的進化到文明的演...

第二屆中匈可再生能源、新材料商業投資峰會將盛大啟幕

第二屆中匈可再生能源、新材料商業投資峰會將盛大啟幕

第二屆中匈可再生能源、新材料商業投資峰會于2025年4月9日在匈牙利布達佩斯盛大啟幕。

雕刻耐心|第18屆中國投資年會·有限合伙人峰會在滬召開

雕刻耐心|第18屆中國投資年會·有限合伙人峰會在滬召開

“中國投資年會”作為私募股權行業的年度盛會,已成功舉辦了18屆,吸引了全國VC/PE領域從業者的廣泛...

主站蜘蛛池模板: 久久久精品国产免费观看同学 | 成人午夜两性视频免费看 | 成人国产精品久久久免费 | 欧洲国产伦久久久久久久 | 久久国产成人 | 国产精品成人一区二区 | 成年人免费黄色 | 国产高清在线精品一区a | 亚洲一区二区三区免费 | 黄色毛片在线 | 精品国产理论在线观看不卡 | 欧美另类视频在线观看 | 久久在线精品 | 亚洲不卡在线 | 成人观看的视频三级 | 欧美成人三级 | 欧美日韩一区二区三区视视频 | 日韩一区国产二区欧美三区 | 999国产精品亚洲77777 | 国产精品亚洲四区在线观看 | 色综合久久加勒比高清88 | 久久久久女人精品毛片 | 免费欧洲毛片a级视频无风险 | 亚洲欧美日本综合一区二区三区 | 国产成人免费视频 | 国产三级一区二区 | 久久免费看片 | 精品久久久久久久 | freesex日本高清nice| 2017天天爽夜夜爽精品视频 | 亚洲波多野结衣日韩在线 | 久久中文字幕久久久久91 | 日本加勒比视频 | 久久se精品一区二区国产 | 99香蕉网| 亚洲日本久久一区二区va | 怡红院免费全部视频在线视频 | 欧美久草 | 欧美成人观看免费完全 | 亚洲一区二区三区四区在线 | 成人在线观看午夜 |