發(fā)布時間:2024-05-21 09:38:24 瀏覽量:163次
Google DeepMind發(fā)布了新的Robotic Transformer 2(RT-2),這是一種視覺-語言-動作(VLA)模型,可以將知識轉化為機器人控制的通用指令。
RT-2建立在Robotic Transformer 1(RT-1)的基礎上,通過多任務演示訓練,展現出超越機器人數據的泛化能力。
RT-2以VLM為基礎,實現了對機器人的控制,通過Pathways Language and Image model (PaLI-X)和Pathways Language model Embodied (PaLM-E)的支柱。
相比之前的模型,RT-2的泛化性能大幅提高,Google DeepMind進行了大量機器人試驗并展示了優(yōu)秀的機器人策略。
從VLM到VLA,主要進展在于將機器人動作指令直接作為模型token輸出,省去了VLM模型將輸出的指令翻譯成底層控制信號的步驟。
RT-2表明VLM可以轉化為強大的VLA模型,通過PaLI-X和PaLM-E帶來了高度改進的機器人策略和更好的泛化性能。
ViT模型將語言模型的transformer架構用于視覺模型,統一了CV和NLP的架構。2020年,谷歌推出Vision Transformer(ViT)模型,證明了直接將Transformer結構應用于視覺模型的成功。
機器人軟件模型算法不斷提升,有望加速提升通用機器人與行業(yè)機器人的可能性,帶動下游需求產生。
行業(yè)機器人分為工業(yè)機器人、服務機器人和特種機器人,將有望廣泛應用于各個行業(yè)領域。
行業(yè)機器人的發(fā)展將加速行業(yè)智能化進程,多模態(tài)GPT的快速發(fā)展助力機器人在交互、規(guī)劃、泛化和感知能力方面提升。
火星時代教育認為機器人軟件系統迭代加速,將推動機器人應用在各個行業(yè)領域。我們期待在未來幾年內看到機器人在智能家居、通用機器人、虛擬現實等領域的應用。
機器人技術迭代不及預期風險:若機器人技術迭代不及預期,則可能對產業(yè)鏈相關公司造成不利影響。
經濟下行超預期風險:宏觀經濟景氣度下行可能影響整個產業(yè)鏈的發(fā)展和增長。
行業(yè)競爭加劇風險:行業(yè)內競爭加劇可能會對企業(yè)增長產生威脅。
熱門資訊
1. 華為手機神奇“AI修圖”功能,一鍵消除衣服!原圖變身大V領深V!
最近華為手機Pura70推出的“AI修圖”功能引發(fā)熱議,通過簡單操作可以讓照片中的人物換裝。想了解更多這款神奇功能的使用方法嗎?點擊查看!
近年來,人工智能逐漸走入公眾視野,其中的AI圖像生成技術尤為引人注目。只需在特定軟件中輸入關鍵詞描述語以及上傳參考圖就能智能高效生成符合要求的...
想將照片變成漫畫效果?這篇文章分享了4個方法,包括Photoshop、聰明靈犀、VanceAI Toongineer、醒圖,簡單操作就能實現,快來嘗試一下吧!
4. 一款免費無限制的AI視頻生成工具火了!國內無障礙訪問!附教程
人人都可以動手制作AI視頻! 打開網址https://pixverse.ai/,用郵箱注冊后,點擊右上角Create,就可以開始創(chuàng)作了。 PixVerse目前有文案生成視頻,和圖片生...
以下是一些免費的AI視頻制作網站或工具,幫助您制作各種類型的視頻。 1. Lumen5:Lumen5是一個基于AI的視頻制作工具,可將文本轉換為視頻。 用戶可以使...
6. 零基礎10分鐘生成漫畫,教大家如何用AI生成自己的漫畫
接下來,我將親自引導你,使用AI工具,創(chuàng)作一本既有趣又能帶來盈利的漫畫。我們將一起探索如何利用這個工具,發(fā)揮你的創(chuàng)意,制作出令人驚嘆的漫畫作品。讓...
就能快速生成一幅極具藝術效果的作品,讓現實中不懂繪畫的人也能參與其中創(chuàng)作!真的超贊噠~趣趣分享幾款超厲害的AI繪畫軟件,提供詳細操作!有需要的快來...
8. AI視頻制作神器Viggle:讓靜態(tài)人物動起來,創(chuàng)意無限!
Viggle AI是一款免費制作視頻的AI工具,能讓靜態(tài)人物圖片動起來,快來了解Viggle AI的功能和優(yōu)勢吧!
9. 10個建筑AI工具,從設計到施工全覆蓋!肯定有你從來沒聽過的
講述了建筑業(yè)比較著名的AI公司小庫科技做出的探索,在這兒就不多說了。今天,我們試著在規(guī)劃設計、建筑方案設計、住宅設計、管道設計、出渲染圖、3D掃...
10. Logo Diffusion——基于sd繪畫模型的AI LOGO 生成器
這下LOGO設計徹底不用求人了。接下來詳細演示一遍操作流程首先進入Logo D... 想學習更多AI技能,比如說關于怎么樣利用AI來提高生產效率、還能做什么AI...
最新文章
同學您好!