NVIDIA宣布將其人工智能 (AI) 和 Isaac Sim 技術(shù)與Intrinsic 的 開(kāi)發(fā)環(huán)境相集成。合作公司開(kāi)發(fā)了一款專注于提高機(jī)器人抓取能力的原型。  Intrinsic 是一家獨(dú)立的 Alphabet 公司，專注于創(chuàng)新軟件和人工智能驅(qū)動(dòng)的機(jī)器人技術(shù)。正如上一篇文章所強(qiáng)調(diào)的，NVIDIA 致力于生成式 AI 的集成和實(shí)施，以幫助使工業(yè)虛擬宇宙成為現(xiàn)實(shí)。

NVIDIA 和 Intrinsic 合并平臺(tái)專業(yè)知識(shí)，以推進(jìn)工業(yè)環(huán)境中的機(jī)器人抓取。圖片由NVIDIA提供 

NVIDIA Isaac 機(jī)械手

NVIDIA 的Isaac Manipulator是模塊化通用處理單元 (GPU) 加速庫(kù)（用于計(jì)算密集型應(yīng)用程序）和基礎(chǔ)模型的存儲(chǔ)庫(kù)，允許機(jī)器人軟件開(kāi)發(fā)人員構(gòu)建和部署可重復(fù)且可擴(kuò)展的工作流程，以編排需要靈巧操作的機(jī)器人任務(wù)。

Isaac Manipulator 使用基礎(chǔ)模型（FoundationPose、Synthetica DETR、NVIDIA cuMotion 和 FoundationGrasp） ——一種嵌套在機(jī)器學(xué)習(xí)領(lǐng)域并與 Transformer 深度學(xué)習(xí)架構(gòu)（由用于數(shù)據(jù)處理的解碼器/編碼器塊組成）相結(jié)合的AI 神經(jīng)網(wǎng)絡(luò)——它可以通過(guò)跟蹤數(shù)據(jù)特征并識(shí)別順序數(shù)據(jù)中的關(guān)系來(lái)理解大量未標(biāo)記的數(shù)據(jù)。

使用未標(biāo)記的數(shù)據(jù)比使用標(biāo)記的數(shù)據(jù)成本更低、耗時(shí)更少。基礎(chǔ)模型被描述為生成人工智能的形式，根據(jù)輸入（人類語(yǔ)言指令的提示）創(chuàng)建生成的輸出。

基礎(chǔ)模型集中了來(lái)自各種來(lái)源的數(shù)據(jù)，可用于許多應(yīng)用程序。圖片由基礎(chǔ)模型研究中心 (CRFM)提供

NVIDIA表示，通過(guò)Isaac Manipulator開(kāi)發(fā)機(jī)器人工業(yè)應(yīng)用時(shí)，開(kāi)發(fā)人員可以節(jié)省寶貴的編程時(shí)間，并將路徑規(guī)劃速度加快多達(dá)80倍。零樣本學(xué)習(xí)（無(wú)需先前的示例）還提高了機(jī)器人的部署速度，提高了效率和生產(chǎn)力，并使開(kāi)發(fā)人員能夠自動(dòng)執(zhí)行更多新的機(jī)器人任務(wù)。早期的生態(tài)系統(tǒng)合作伙伴包括泰瑞達(dá)旗下的Universal Robots、READY Robotics、PickNik Robotics、Yaskawa 等。

機(jī)器人抓取能力

執(zhí)行機(jī)器人抓取任務(wù)的缺點(diǎn)包括對(duì)自主操作進(jìn)行編程以完成各種動(dòng)態(tài)任務(wù)的費(fèi)用和耗時(shí)。這在可用于簡(jiǎn)化和加速基于機(jī)器人操作的應(yīng)用程序開(kāi)發(fā)的適應(yīng)性軟件創(chuàng)新方面留下了關(guān)鍵差距。

作為與 NVIDIA 合作的一部分，Intrinsic 利用NVIDIA Isaac Sim的功能生成節(jié)省成本的合成數(shù)據(jù)，以訓(xùn)練機(jī)器人的 AI 神經(jīng)網(wǎng)絡(luò)，以使用金屬板和吸力夾具的計(jì)算機(jī)輔助設(shè)計(jì)模型執(zhí)行真空抓取。最終的原型使用了 Intrinsic 的虛擬開(kāi)發(fā)環(huán)境Intrinsic Flowstate，該環(huán)境可以在校準(zhǔn)真實(shí)硬件之前通過(guò)模擬進(jìn)行路徑規(guī)劃、姿態(tài)估計(jì)和機(jī)器人單元工作流程測(cè)試。

從 NVIDIA 基礎(chǔ)模型開(kāi)發(fā)并在 Intrinsic Flowstate 中實(shí)施的抓取技能執(zhí)行的虛擬和現(xiàn)實(shí)世界視圖。視頻由NVIDIA提供 

Isaac Manipulator 和 Isaac Sim 可以組合起來(lái)，為機(jī)器人夾具生成適合應(yīng)用的姿勢(shì)、計(jì)算統(tǒng)一設(shè)備架構(gòu) (CUDA) 加速的機(jī)器人運(yùn)動(dòng)，并在通過(guò) Intrinsic 平臺(tái)在實(shí)際實(shí)施之前評(píng)估虛擬原型。 

提高機(jī)器人的靈活性 

NVIDIA 和 Intrinsic 攜手合作，通過(guò)采用兩家公司各自技術(shù)的最新原型，采用可調(diào)節(jié)的基于人工智能的生成模型，加速在全球工業(yè)環(huán)境中開(kāi)發(fā)和部署機(jī)器人自動(dòng)化任務(wù)。