《電子技術應用》
您所在的位置:首頁 > 人工智能 > 業界動態 > NVIDIA利用全新開源模型與仿真庫加速機器人研發進程

NVIDIA利用全新開源模型與仿真庫加速機器人研發進程

使其能夠拆解復雜指令,并借助已有知識與常識執行任務
2025-09-30
來源:英偉達
關鍵詞: 英偉達 機器人

NVIDIA 在2025年機器人學習大會(CoRL)上宣布,開源物理引擎 Newton 現已可以通過 NVIDIA Isaac? Lab 獲取,同時推出的還有用于機器人技能的開源推理視覺語言動作模型 NVIDIA Isaac GR00T N1.6,以及全新 AI 基礎設施。上述技術為開發者和研究人員提供了開源的機器人加速平臺,該平臺能夠加快迭代周期、統一測試標準、整合訓練與機器人端推理,并助力機器人安全可靠地將技能從仿真環境遷移到現實世界。

11.jpg

NVIDIA Omniverse 與仿真技術副總裁 Rev Lebaredian 表示:“人形機器人是物理 AI 的下一個前沿領域,需要在不可預測的世界中進行推理,適應環境并安全行動。通過最新升級,開發者可以擁有將機器人從研發階段帶入日常生活的三大核心工具,包括充當機器人‘大腦’的 Isaac GR00T,負責對機器人‘身體’運作進行仿真的物理引擎 Newton,以及作為機器人‘訓練基地’的 NVIDIA Omniverse。”

 

物理引擎 Newton 開創機器人物理仿真新標準

機器人在仿真環境中的學習速度更快、安全性更高,但人形機器人關節結構、平衡控制和動作模式非常復雜,現有物理引擎的性能已經難以滿足。全球超過 25 萬機器人開發者亟需精準的物理仿真技術,以確保在仿真環境中教會機器人技能,同時安全可靠地遷移到現實世界。 

今天 NVIDIA 宣布,由 Linux Foundation 管理、GPU 加速的開源物理引擎 Newton 已發布測試版本。該物理引擎由 Google DeepMind、Disney Research 與 NVIDIA 聯合開發,基于 NVIDIA Warp 和 OpenUSD 框架構建,現已開放使用。 

憑借 Newton 靈活的設計,以及兼容多種物理求解器的能力,開發者現在可以對非常復雜的機器人動作進行仿真,例如在雪地或碎石路面行走、操控杯子和水果等,并且能夠成功地將這些動作部署到現實場景中。 

包括蘇黎世聯邦理工學院機器人系統實驗室、慕尼黑工業大學及北京大學在內的眾多知名高校,以及機器人技術公司光輪智能,仿真引擎公司 Style3D 已經率先使用 Newton。

 

Cosmos Reason 為全新開源模型 Isaac GR00T N1.6 提升機器人推理能力

為了在物理世界中執行類似人類的任務,人形機器人必須能夠理解模糊指令,并應對各種以前未見過的復雜情況。 

最新發布的開源機器人基礎模型 NVIDIA Isaac GR00T N1.6,即將在 Hugging Face 平臺上線。這一模型將集成 NVIDIA Cosmos? Reason——一款專為物理 AI 打造的開源、可定制的推理視覺語言模型。作為機器人的“深度思考大腦”,Cosmos Reason 能夠利用已有知識、常識和物理原理,將模糊的指令轉化為逐步執行的計劃,從而應對新場景并泛化到多種任務中去。 

Cosmos Reason 的下載量已超過 100 萬次,目前在 Hugging Face 的物理推理模型排行榜上位居榜首。該模型還能夠篩選和標注大量真實及合成數據,用于模型訓練。Cosmos Reason 1 現已作為 NVIDIA NIM? 提供,NVIDIA NIM是一款易于使用的 AI 模型部署微服務。 

借助 NVIDIA Isaac GR00T N1.6,人形機器人可以同時完成移動和物體操控動作,其軀干和手臂擁有更大的活動自由度,能夠完成各種高難度任務,比如推開較重的房門。 

開發者還可以利用 Hugging Face 平臺上的開源 NVIDIA 物理 AI 數據集,對 NVIDIA Isaac GR00T N 系列模型進行后訓練。該數據集包含數千條合成及來自真實世界的軌跡數據,目前下載量已超過 480 萬次。 

AeiROBOT、Franka Robotics、LG Electronics、光輪智能、Mentee Robotics、Neura Robotics、Solomon、Techman Robot 和 UCR 等領先機器人制造商,正評估采用 Isaac GR00T N 系列模型來打造通用機器人。

 

面向物理 AI 開發的全新 Cosmos 世界基礎模型

NVIDIA 宣布了開源 Cosmos 世界基礎模型(WFM)的全新更新。該模型的下載量已超過 300 萬次,開發者可通過文本、圖像和視頻提示,生成多樣化數據,從而大規模加速物理 AI 模型的訓練。 

· 即將推出的 Cosmos Predict 2.5 將三款 Cosmos 世界基礎模型進行整合,集成為一個功能強大的模型,大幅降低了復雜度,節省開發時間并提高效率。它支持更長時長的視頻生成(最長可創建 30 秒視頻),同時提供多視角攝像頭輸出,以實現更豐富的世界仿真效果。

· 即將推出的 Cosmos Transfer 2.5 相比上一代模型,其生成結果速度更快、質量更高,而模型大小僅為上一代模型的 1/3.5。該模型能夠根據真實的 3D 仿真場景和空間控制輸入,比如深度信息、分割數據、邊緣信息和高分辨率地圖等,生成逼真的合成數據。

 

訓練機器人抓取技能的新工作流

教會機器人抓取物體是機器人領域最具挑戰性的任務之一。這不僅涉及機械臂的移動,還需要將抽象的指令轉化為精準的動作,機器人必須通過反復試錯才能掌握這項技能。 

基于 NVIDIA Omniverse? 構建的開發者預覽版 NVIDIA Isaac Lab 2.3 新增了靈巧抓取工作流。該工作流通過自動化課程體系,在虛擬環境中對擁有多手指的機器人和機械臂進行訓練,從簡單任務開始,逐步提升難度。此工作流會調整重力、摩擦力、物體重量等參數,訓練機器人在不可預測的環境中也能掌握技能。 

Boston Dynamics 的 Atlas 機器人借助這一工作流學習抓取技能,其操控能力得到了顯著提升。 

包括 Agility Robotics、Boston Dynamics、Figure AI、Hexagon、Skild AI、Solomon 以及 Techman Robot 在內的領先的機器人公司,已經采用 NVIDIA Isaac 和 Omniverse 技術。

 

在仿真環境中評估機器人的習得技能

讓機器人掌握一項新技能(如拿起杯子或穿過房間)非常困難,在實體機器人上測試這些技能不僅耗時且成本高昂。 

仿真技術為解決這一問題提供了途徑,它能夠在無數場景、任務和環境中測試機器人習得的技能。但即便在仿真環境中,開發者構建的測試場景往往零散且簡單化,無法真實反映現實世界的復雜情況。在完美且簡單的仿真環境中學會導航的機器人,一旦面臨現實世界的復雜狀況就會失敗。 

為了讓開發者無需從零構建系統,即可在仿真環境中開展復雜、大規模的評估,NVIDIA 與光輪智能聯合開發了 NVIDIA Isaac Lab Arena——這是一個用于大規模實驗和標準化測試的開源策略評估框架,該框架即將推出。

 

全新 NVIDIA AI 基礎設施,為機器人工作負載提供全面支持

為了讓開發者充分利用這些先進的技術和軟件庫,NVIDIA 推出了專為高要求工作負載設計的 AI 基礎設施,包括: 

· NVIDIA GB200 NVL72:這是一款集成了 36 個 NVIDIA Grace? CPU 和 72 個 NVIDIA Blackwell GPU 的機架式系統。各大云服務提供商已開始采用該系統,以加速 AI 訓練和推理過程,包括復雜推理和物理 AI 任務。

· NVIDIA RTX PRO? 服務器:為機器人開發的各類工作負載(包括訓練、合成數據生成、機器人學習和仿真)提供統一架構。RAI Institute 已采用 RTX PRO 服務器。

· NVIDIA Jetson Thor?:搭載 Blackwell GPU,能夠支持機器人運行多個 AI 工作流,實現實時智能交互,帶來機器人端實時推理功能。這一突破對于高性能物理 AI 工作負載以及人形機器人等應用具有重要意義。包括 Figure AI、銀河通用、Google DeepMind、Mentee Robotics、Meta、Skild AI 以及宇樹科技在內的合作伙伴已采用 Jetson Thor。

 

NVIDIA 推進機器人研究進程

CoRL 收錄的論文中,近半數引用了 NVIDIA 的相關技術,包括 GPU、仿真框架和 CUDA 加速庫。這些技術已被卡內基梅隆大學、華盛頓大學、蘇黎世聯邦理工學院和新加坡國立大學等領先研究實驗室及機構廣泛采用。 

此次 CoRL 還重點展示了斯坦福視覺與學習實驗室開展的機器人學習基準測試項目 BEHAVIOR,以及由北京大學開發的用于推進基于視覺的觸覺機器人研究的高性能仿真平臺 Taccel。


訂閱網站文章尾圖1.jpg

本站內容除特別聲明的原創文章之外,轉載內容只為傳遞更多信息,并不代表本網站贊同其觀點。轉載的所有的文章、圖片、音/視頻文件等資料的版權歸版權所有權人所有。本站采用的非本站原創文章及圖片等內容無法一一聯系確認版權者。如涉及作品內容、版權和其它問題,請及時通過電子郵件或電話通知我們,以便迅速采取適當措施,避免給雙方造成不必要的經濟損失。聯系電話:010-82306118;郵箱:aet@chinaaet.com。
亚洲一区二区欧美_亚洲丝袜一区_99re亚洲国产精品_日韩亚洲一区二区
欧美色中文字幕| 亚洲国产精品成人综合| 噜噜噜躁狠狠躁狠狠精品视频| 亚洲欧美日韩国产成人| 国产精品99久久久久久www| 亚洲免费成人av电影| 亚洲黄色免费网站| 亚洲国产人成综合网站| 久久国产精品一区二区三区四区| 亚洲欧美日韩第一区| 亚洲在线一区| 亚洲欧美日韩精品一区二区 | 亚洲国产日韩在线| 在线观看亚洲视频| 亚洲国产专区| 亚洲理论在线| 99在线精品免费视频九九视| a91a精品视频在线观看| 99热这里只有精品8| 一本色道婷婷久久欧美| 一本色道久久综合精品竹菊 | 欧美日韩精品免费| 欧美日韩国产小视频在线观看| 欧美精品久久久久久久| 欧美日韩国产精品一区| 国产精品xxx在线观看www| 国产精品激情av在线播放| 国产精品一卡二卡| 国产一区二区三区在线播放免费观看 | 欧美一区观看| 久久婷婷亚洲| 欧美精品三级| 国产精品美女久久久久久2018| 国产欧美一区视频| 黑人巨大精品欧美黑白配亚洲 | 亚洲精品一区二区在线| 中文有码久久| 欧美在线视频不卡| 亚洲精品乱码久久久久久蜜桃麻豆| 亚洲精选视频免费看| 亚洲视频一区二区在线观看| 亚洲午夜激情网站| 欧美在线一二三四区| 美女在线一区二区| 欧美日韩一视频区二区| 国产日产亚洲精品| 亚洲韩国日本中文字幕| 亚洲一区二三| 亚洲国产综合视频在线观看| 在线亚洲欧美视频| 久久精品一二三区| 欧美日韩国产综合视频在线观看| 国产欧美一区在线| 91久久久亚洲精品| 亚洲女爱视频在线| 亚洲精品美女在线观看播放| 亚洲欧美日韩中文在线制服| 免费成人美女女| 国产精品每日更新在线播放网址| 狠狠操狠狠色综合网| 亚洲毛片一区二区| 久久精品国产一区二区电影| 亚洲视频在线观看网站| 久久午夜精品一区二区| 欧美视频在线观看一区| 狠狠做深爱婷婷久久综合一区| 日韩亚洲精品电影| 久久精品夜色噜噜亚洲a∨ | 亚洲欧美伊人| 亚洲国产精品久久久久久女王| 亚洲视频播放| 久久亚洲精品视频| 国产精品久久99| 亚洲成色精品| 欧美亚洲一区二区三区| 一区二区三区高清在线| 久久久爽爽爽美女图片| 国产精品国产精品| 亚洲品质自拍| 欧美影院成人| 亚洲欧美国产高清| 欧美日韩成人| 亚洲成人自拍视频| 欧美一区中文字幕| 亚洲综合精品| 欧美伦理一区二区| 伊人久久噜噜噜躁狠狠躁| 亚洲女与黑人做爰| 亚洲视频999| 欧美精品www| 在线精品一区| 欧美一区二区高清| 亚洲综合色在线| 欧美日韩一二三区| 亚洲电影免费观看高清完整版| 欧美一站二站| 欧美在线日韩在线| 国产精品成人av性教育| 亚洲精品视频免费观看| 亚洲日本电影| 免费成人黄色片| 国产在线乱码一区二区三区| 亚洲一区二区在线看| 亚洲午夜免费视频| 欧美日韩国产一区精品一区| 亚洲国产成人在线| 亚洲动漫精品| 久久精品亚洲一区二区三区浴池| 国产精品久久久久久久久果冻传媒 | 亚洲视频在线播放| 欧美日韩在线播放三区| 亚洲日本欧美| 99视频超级精品| 欧美激情性爽国产精品17p| 在线精品观看| 亚洲国产精品日韩| 蜜臀久久99精品久久久画质超高清| 黑人巨大精品欧美一区二区| 久久精品成人一区二区三区蜜臀| 久久九九精品| 国产亚洲美州欧州综合国| 午夜精品国产| 久久久精品免费视频| 国产视频在线观看一区二区三区| 午夜国产不卡在线观看视频| 欧美在线视频网站| 国产一区在线视频| 亚洲高清在线播放| 欧美成年人视频| 亚洲精品久久久久久一区二区 | 亚洲一区二区三区乱码aⅴ| 欧美日韩在线免费观看| 一区二区日韩免费看| 亚洲免费在线播放| 国产精品素人视频| 午夜国产精品视频免费体验区| 久久精品国产视频| 在线观看欧美日本| 一区二区三区免费网站| 国产精品福利在线观看| 小嫩嫩精品导航| 另类天堂视频在线观看| 91久久一区二区| 亚洲午夜激情在线| 国产日韩欧美视频在线| 久久国产精品久久久| 欧美r片在线| 亚洲作爱视频| 欧美一区二区三区四区在线| 国产尤物精品| 亚洲美女在线观看| 欧美亚洲第一区| 欧美一区二区视频97| 欧美va亚洲va香蕉在线| 日韩一区二区精品视频| 欧美一级视频精品观看| 国内自拍一区| 一区二区日韩伦理片| 国产精品美女久久久久久2018| 久久福利资源站| 欧美欧美午夜aⅴ在线观看| 亚洲桃花岛网站| 久久免费视频一区| 亚洲精品护士| 久久激情视频免费观看| 亚洲二区在线观看| 午夜精品电影| 亚洲国产精品一区二区www在线| 亚洲专区国产精品| 国产在线不卡视频| 艳妇臀荡乳欲伦亚洲一区| 国产欧美亚洲精品| 99re8这里有精品热视频免费| 国产精品亚洲片夜色在线| 亚洲国产精品一区二区三区| 欧美视频福利| 久久精品国产一区二区电影| 欧美三级午夜理伦三级中文幕| 欧美一级理论性理论a| 欧美精品xxxxbbbb| 欧美一区观看| 国产精品多人| 亚洲精选一区| 国产专区综合网| 亚洲一区在线免费| 亚洲福利在线观看| 久久爱www久久做| 9久re热视频在线精品| 久久综合亚洲社区| 亚洲一区美女视频在线观看免费| 麻豆成人av| 亚洲欧美激情视频| 欧美日韩精品国产| 91久久线看在观草草青青| 国产日韩欧美成人| 亚洲婷婷综合久久一本伊一区| 在线观看视频欧美| 久久狠狠亚洲综合| 中文在线资源观看网站视频免费不卡| 牛人盗摄一区二区三区视频|