国产无遮挡色视频免费视频-国产五月色婷婷综合-国产五月婷婷-国产午夜不卡-曰批免费视频播放在线看片二-曰韩一级毛片

更多精彩 >

星動紀元端到端原生機器人大模型ERA-42正式亮相,引領具身大模型進入靈巧操作時代

2024-12-23 12:32:36   來源:華夏晚報  作者: 

摘要:這是業界首次僅通過同一個具身大模型就實現了五指靈巧手像人手一樣使用多種工具完成上百種靈巧復雜操作任務,展現了ERA-42行業領先的通用、靈巧操作能力。

導語:近期,星動紀元端到端原生機器人大模型ERA-42正式亮相,即“紀元原生機器人大模型”,寓意著不斷探索宇宙萬物的終極答案,展示了其與自研五指靈巧手星動XHAND1結合后的靈巧操作能力,已學會了使用不同工具完成100多種復雜靈巧的操作任務,并且持續在同一個模型下學習新的技能。例如,拿起桌上螺釘鉆鉆緊螺釘、用錘子敲打釘子、將水杯扶正后再往水杯中倒水等任務。

圖片1.jpg

基于ERA-42,星動XHAND1能用不同工具完成多種靈巧操作新任務

這是業界首次僅通過同一個具身大模型就實現了五指靈巧手像人手一樣使用多種工具完成上百種靈巧復雜操作任務,展現了ERA-42行業領先的通用、靈巧操作能力。模型不需要任何預編程技能,完全基于其強大的泛化和自適應力,能在不到2小時內通過收集少量數據就學會執行新的任務。同時,ERA-42還在快速不斷學習更多新技能中。

圖片2.jpg

基于ERA-42,星動XHAND1可完成100多種精細化、智能化的五指靈巧手操作任務

ERA-42也是世界范圍內首個真正的五指靈巧手具身大模型,開啟了具身大模型的通用靈巧操作時代。

1. “真正”的具身大模型才是開啟通用具身智能體的密鑰,需要具備以下三個要素:

一是統一一個模型泛化多種任務和環境:通過構建一個統一的原生模型,融合視覺、語言、觸覺和身體姿態等全模態信息,實現對不同任務和環境的泛化能力。

二是端到端:從接收全模態數據,到生成最終輸出(如決策、動作等),通過一個簡潔的神經網絡鏈路完成。該過程無需人為設計特征、預編程或干預處理步驟,使得具身智能體能夠實時適應不同任務和環境,顯著提升靈活性與開發效率。

三是Scaling up(規模化):真正的統一的端到端算法才允許模型通過持續的數據積累實現自我完善,使得具身大模型在數據量指數級增長的同時,不僅提升性能,還能在未知任務中展現卓越的自適應和泛化能力。

例如,被行業廣泛熟知的Physical Intelligence (簡稱PI)發布的π0模型就具備上述要素,是典型的真正意義上的端到端具身大模型。

2. 星動紀元ERA-42是國內首個真正意義上的端到端原生機器人大模型,比肩世界領先水平

早期,星動紀元和PI幾乎同期采用了端到端算法來提升其原生機器人大模型性能,PI推出的π0模型,通過結合互聯網規模的視覺-語言預訓練與機器人操作數據集后訓練,使得機器人能夠在人類環境中自主執行多種復雜任務,這是機器人從特定任務的“專家”向多任務的“通才”發展歷程上的重要一步,也是具身大模型領域的一個里程碑。

圖片3.jpg

星動紀元早期發布的研究成果和Physical Intelligence (PI)幾乎不謀而合

星動論文HiRT: Enhancing Robotic Control with Hierarchical Robot Transformers發表在CoRL2024

而后,星動紀元又探索了另一條訓練道路,采用大規模視頻數據學習策略,涵蓋無標注的視頻數據、公開各類形態機器人的數據、人類活動數據以及遙操作數據等。并且,在上述數據的使用上,星動紀元不是直接模仿視頻里的人怎么去做,而是學習行動之后會產生什么樣的結果。這種方式使得學習效果不受限于數據質量,能大大降低數據收集成本,解決了數據消耗量巨大、需要大量高質量數據的行業難題。

此外,星動紀元的技術團隊已將世界模型融入原生機器人大模型中,使得模型不僅具備行動能力,還具備了對物理世界的理解能力,能夠對未來行動軌跡進行預測。

圖片4.jpg

后期,星動紀元探索了融合世界模型的原生機器人大模型

星動論文Prediction with Action: Visual Policy Learning via Joint Denoising Process發表在NeurIPS 2024

還能迅速響應外部干擾,并在任務執行過程中持續自適應優化行為,直至任務完成。提升了機器人執行任務的高效性和準確性。

星動紀元打造的端到端原生機器人大模型ERA-42憑借其預測能力,模型具備強大的泛化、自適應和規模化能力。結合星動紀元為AI打造的全新硬件平臺,可快速實現具身智能體軟硬件協同進化和商業化落地。

3. 星動紀元端到端原生機器人大模型ERA-42引領具身大模型進入通用靈巧操作時代

1)相比夾爪,星動XHAND1已經可以完成100多種精細化、智能化的復雜靈巧操作任務

相比夾爪,基于ERA-42能力,五指靈巧手能夠真正像人手一樣使用更多種多樣的工具,完成更通用、靈巧性更強、復雜度更高的百種以上操作任務。

圖片5.jpg

基于ERA-42,五指靈巧手星動XHAND1相比夾爪能使用更多不同工具執行更靈巧操作

2)星動紀元原生機器人大模型ERA-42能理解物理世界和預測未來

融合世界模型后,ERA-42具備對物理世界的理解以及對未來的預測的能力,從而大幅提升了泛化能力和任務成功率。

例如,下圖中上方的圖片展示了真實物理世界中打開冰箱的逐幀操作,下方的圖片則為ERA-42生成的環境建模與對打開冰箱任務的逐幀預測。可以看到兩張圖片非常接近,說明模型預測非常準確。這與其他機器人大模型直接學習行動、而忽視對世界本身理解的方式,或者僅將世界模型用于生成仿真數據的方式,存在本質的區別。

圖片6.jpg

真實世界執行任務和ERA-42預測執行任務對比圖

3)星動紀元原生機器人大模型ERA-42具備更強泛化能力

基于大規模視頻數據的預訓練,只需采集少部分數據,基于ERA-42的泛化能力,短時間內通過單一的策略靈巧手就能學會執行新的操作任務。此前,星動紀元技術團隊就通過這種訓練方式采集簡單的紅黃藍方塊抓取數據,成功實現了從未見過的多樣化物體(如胡蘿卜、茄子等)的抓取泛化,并相對其他模型算法在泛化任務上顯著提升了成功率。

圖片7.jpg

通過簡單彩色方塊的抓取數據實現多樣化物體的泛化抓取操作

4)星動紀元原生機器人大模型ERA-42具備更強自適應性

由于融合了世界模型,ERA-42不管在單任務上,還是長序列任務上都展現出了業內領先的強大抗干擾能力。

5)星動紀元原生機器人大模型ERA-42初步體現“Scaling效應”

并且研究結果表明,隨著模型規模的擴大,任務成功率也明顯提升,初步體現了和大語言模型訓練中類似的“Scaling效應”,即模型規模與性能之間的正相關性。

圖片8.jpg

“Scaling效應”顯示模型與機器人性能呈現正相關性

4.星動紀元端到端原生機器人大模型ERA-42和為AI打造的全新硬件平臺協同進化,共建原生具身智能體

構建通用具身智能體需要軟硬件協同迭代,就像人類的腦和身體是從小到大同步協同成長的一樣。

圖片9.jpg

構建原生通用具身智能體=原生機器人大模型+為AI定義的硬件平臺協同進化

因此,星動紀元打造了為AI定義的全新硬件平臺。以星動自研推出的五指靈巧手星動XHAND1為例,共有12個主動自由度,并采用純電驅方式,且每個自由度都有對應的驅動源,實現全自主五指關節驅動,能執行高精度任務。星動XHAND1每個手指配備一個高分辨率(>100點)觸覺陣列傳感器,提供精確的三維力觸覺和溫度信息。單手最大握力能達80N,負載可達25kg。

圖片10.jpg

星動XHAND1 —— 全自驅 真自由

星動XHAND1在作業能力上展現出的高性能在協同ERA-42后,為實現復雜靈巧操作任務奠定了基礎。

依托ERA-42,星動紀元通用人形機器人執行任務的通用性和泛化性將大幅提升,結合此前發布的在復雜多樣的地形上穩定行走和奔跑的運動性能,配合上下肢協同作業能力,潛在應用場景也將更加多元化,真正實現原生的通用具身智能體的產業化落地。


猜你喜歡

惠保通工程擔保獲天使輪融資,助力工程擔保行業新發展

創新創業惠保通

近日,廣東省惠保通工程擔保有限公司成功獲得開城投資5000 萬人民幣天使輪融資

1小時前

2025商界木蘭年會:洪恩CFO王巍巍暢談全球化戰略與創新實踐

創新創業洪恩

近日,由《中國企業家》雜志社主辦的2025(第十七屆)商界木蘭年會在北京成功舉辦。

6小時前

閃回科技受邀出席中國資源循環集團粵港澳大灣區展業推進會

創新創業閃回科技

4 月 25 日,中國資源循環集團粵港澳大灣區展業推進會在深圳成功舉行。

1天前

驚爆!大麥微針植發 2025 品牌戰略發布會將啟,植發行業 5.0 時代神秘面紗待揭

創新創業大麥微針植發

被發際線后移、頭頂稀疏困擾的發友們注意了!一則驚爆發友圈的重磅消息來了,2025 年 4 月 27 ...

1天前

神州租車上線萬輛新車 五一既能“租好車”更能“開新款”

創新創業神州租車

近日,神州租車宣布啟動今年來最大規模新車投放計劃,即日起在全國范圍投放新車超萬輛,涵蓋經濟型轎車、S...

1天前

原創

成都,即將迎來一個商業航天IPO

成都國星宇航

AI衛星第一股,要來了。

2025-02-07

藍思科技:人形機器人產業新勢力

藍思科技金融科技

隨著特斯拉人形機器人Optimus量產計劃臨近,以及國內智元機器人、宇樹機器人等大放異彩,全球科技界...

2025-02-07

京東春節消費觀察:“電影”關聯搜索量同比增長235% 哪吒關聯產品銷量增超30倍

京東大消費

這個春節,線下賞景點、線上購特產,已成為越來越多消費者的選擇。

2025-02-07

原創

中石油7.3億在吉林成立新能源公司

中石油

【#中石油7.3億在吉林成立新能源公司# 含新能源汽車相關業務】

2025-02-07

原創

國電電力在香格里拉成立新能源開發公司

國電電力

【#國電電力在香格里拉成立新能源開發公司# 注冊資本9000萬】

2025-02-07

開門紅 | 遠大智能博林特電梯中標哥倫比亞麥德林地鐵項目!

創新創業遠大智能

近日,來自拉丁美洲的一則消息引起了行業廣泛關注:遠大智能工業集團博林特電梯,成功中標哥倫比亞麥德林地...

2025-02-07

《以金融學入道》

金融科技

在人類思想的漫長演進中,“道”一直是哲學家、思想家們不斷探尋的核心。

2025-02-07

完美世界再發反腐通報:開除4人,永不錄用

完美世界創新創業

從2024年以來,各家互聯網大廠就刮起一陣內部“反腐風”,近期各家更是頻發通報,要將反舞弊進行到底。

2025-02-07

攜手紫百合,九游娛樂助力佛羅倫薩拓展全球市場

創新創業九游娛樂

在全球化背景下,跨界合作已成為推動產業升級的重要動力。

2025-02-07

投資家網(www.51baobao.cn)是國內領先的資本與產業創新綜合服務平臺。為活躍于中國市場的VC/PE、上市公司、創業企業、地方政府等提供專業的第三方信息服務,包括行業媒體、智庫服務、會議服務及生態服務。長按右側二維碼添加"投資哥"可與小編深入交流,并可加入微信群參與官方活動,趕快行動吧。

分化浪潮中的堅守與突破 | 第19屆中國投資年會,即將啟幕

分化浪潮中的堅守與突破 | 第19屆中國投資年會,即將啟幕

在時代的浩渺長河中,“分化”宛如一條隱匿的脈絡,貫穿于萬物的生長、發展與變遷。從生命的進化到文明的演...

第二屆中匈可再生能源、新材料商業投資峰會將盛大啟幕

第二屆中匈可再生能源、新材料商業投資峰會將盛大啟幕

第二屆中匈可再生能源、新材料商業投資峰會于2025年4月9日在匈牙利布達佩斯盛大啟幕。

雕刻耐心|第18屆中國投資年會·有限合伙人峰會在滬召開

雕刻耐心|第18屆中國投資年會·有限合伙人峰會在滬召開

“中國投資年會”作為私募股權行業的年度盛會,已成功舉辦了18屆,吸引了全國VC/PE領域從業者的廣泛...

主站蜘蛛池模板: 看久久久久毛片婷婷色 | 中日韩精品视频在线观看 | 男女视频在线看 | 成年人视频在线观看免费 | 国产永久免费视频m3u8 | 538在线视频二三区视视频 | 精品九九久久国内精品 | 成人在线不卡 | a免费网站 | 一级做a爱片特黄在线观看免费看 | 中国一级毛片免费观看 | 国产区在线免费观看 | 成人高清视频在线观看 | 成人爽爽大片在线观看 | 韩国毛片基地 | 国内精品久久久久久久aa护士 | 久久久久久国产精品三级 | 久久3| 3d动漫精品成人一区二区三 | 中国农村一级毛片 | 国产精品成人免费视频不卡 | 国产大臿蕉香蕉大视频女 | 欧美做爱毛片 | 亚色网址 | 国产男女 爽爽爽爽视频 | 中文字幕亚洲 综合久久 | 一级特黄aaa大片 | 亚洲精品无码专区在线播放 | 韩国精品一区二区三区在线观看 | 加勒比色综合久久久久久久久 | 国产综合视频在线观看一区 | 免费的a级毛片 | 玖玖香蕉视频 | 成人久久18免费网站入口 | 久久国产香蕉 | 日韩亚洲欧美一区噜噜噜 | 欧美亚洲日本在线 | 亚洲天堂网视频 | 久久人人草 | 久草视频在 | 亚洲国产二区三区久久 |