「若愚科技」機器人“超級大腦”的引入已經(jīng)完成多智能體驗證明 | 最前線
作者丨王沁
邱曉芬的編輯
近年來,AI大模型技術(shù)的快速發(fā)展在一些細分領(lǐng)域取得了與人類相當?shù)某删?,同時也促進了具體智能技術(shù)的發(fā)展。但通用AI大模型與具體智能行業(yè)大腦之間存在一定的行業(yè)gap,其核心是通用AI大模型對具體智能場景的區(qū)域適應(yīng)性差。
因此,國內(nèi)機器人公司通常需要在機器人領(lǐng)域開發(fā)自己的專用大腦。國內(nèi)機器人大腦創(chuàng)業(yè)公司方興未艾,位于深圳,依托哈爾濱工業(yè)大學(xué)(深圳)設(shè)立的“若愚科技”是目前國內(nèi)為數(shù)不多的專注于多模式大型機器人大腦研發(fā)的公司之一。
36Kr最近了解到,若愚科技推出的若愚九天機器人大腦,完成了多模態(tài)大模型驅(qū)動下的群體智能,并通過無人廚房環(huán)境進行技術(shù)規(guī)范驗證,驅(qū)動多智能體烹飪無人廚房。
通過人類自然語言與多個機器人的互動,完成從點餐到吃飯的全過程,獨立規(guī)劃“烹飪”的長序列任務(wù)。與目前市場上常見的智能技術(shù)不同,如果愚蠢的九天機器人大腦能夠?qū)崿F(xiàn)人類意圖理解、高頻人機交互、復(fù)雜任務(wù)規(guī)劃等功能。
自然語言交互展示
比如,當人類提出“做一道炒生菜”的需求時,機器人可以獨立理解人類的意圖,規(guī)劃任務(wù),轉(zhuǎn)化為“在食品區(qū)撿菜”、“在準備區(qū)稱重”、“在制作區(qū)做飯”、“在消費區(qū)吃飯”等多個步驟。
另外,如果愚蠢的九天機器人大腦有一定的舉一反三的泛化能力。比如訓(xùn)練模型的時候,我只是告訴它加大蒜,但是沒有訓(xùn)練過加辣椒。但是,如果人們要求機器人加辣椒,他們可以自動理解大蒜和辣椒屬于調(diào)味料,并知道它們應(yīng)該在加大蒜的階段被辣椒取代。
長序列任務(wù)計劃(快速生成復(fù)雜任務(wù)計劃)
據(jù)悉,若愚·九天機器大腦的另一大突破是,多模態(tài)大模型驅(qū)動的群體智能,賦予多智能體自主分工合作的能力。
簡而言之,就是“一個大腦,多個身體”,多個機器人(包括機械臂和AGV)由若愚·九天大腦集中控制。
若愚科技首席產(chǎn)品官鄧煜平告訴《智能出現(xiàn)》,在多個機器人高效協(xié)同執(zhí)行復(fù)雜任務(wù)后,這些不同任務(wù)之間存在著復(fù)雜的依賴關(guān)系。例如,當兩個機器人在烹飪時,另一個機器人去取餐具。如果烹飪時間因為菜肴生產(chǎn)過程的暫時變化而變長,另一個機器人可以在取餐具后決定繼續(xù)選擇下一種成分,而不是等待,從而提高效率。
這意味著機器人大腦會獨立規(guī)劃任務(wù)邏輯,同時保證合作的安全性?!暗茈y實現(xiàn)基于傳統(tǒng)規(guī)則的教學(xué)方法”。
群體智能由大模型驅(qū)動(賦予多智能體自主分工合作能力)
此外,若愚九天機器大腦在控制機器人執(zhí)行水平的小腦方面進行了技術(shù)優(yōu)化。例如,針對環(huán)境感知的各種挑戰(zhàn),若愚技術(shù)開發(fā)了大型3D可供性感知技術(shù),可供性地區(qū)感知物體的功能,可以在不注冊的情況下抓取各種物體,抗復(fù)雜的光線和堆疊。
3D自動識別和抓取(無注冊、堆疊、抗復(fù)雜光)
針對“機器人從調(diào)料盒里倒蒜末”、“用鏟子從鍋里倒成品菜”等復(fù)雜動作執(zhí)行難度較大的挑戰(zhàn),若愚科技提出了模仿學(xué)習(xí)技術(shù)的擴散模型驅(qū)動,實現(xiàn)了復(fù)雜的技能和動作的精準執(zhí)行。同時,結(jié)合多模式大模型驅(qū)動的機器人多臂協(xié)同技術(shù),大大提高了目標任務(wù)的協(xié)同能力和執(zhí)行效率。
傳播模式驅(qū)動的復(fù)雜動作執(zhí)行(無需現(xiàn)場示教,精確執(zhí)行)
當前,全球具體智能大腦成果包括:谷歌人工智能團隊PaLMM-E、RT-1/谷歌DeepMind團隊RT-2/RT-X、Open Physicalal Intelligence等。
深圳若愚科技有限公司成立于2023年,孵化自哈爾濱工業(yè)大學(xué)(深圳)計算和智能研究團隊。根據(jù)36Kr的報道,若愚科技今年3月完成了5000多萬天使輪融資。
雙臂合作大模型驅(qū)動(大大提高協(xié)作能力和效率)
若愚科技聯(lián)合創(chuàng)始人兼首席執(zhí)行官孫騰博士表示,若愚科技的九天機器人大腦和機器人小腦技術(shù)突破,可進一步應(yīng)用于焊接、拋光、涂膠、物流領(lǐng)域的分揀、混合堆垛、商業(yè)領(lǐng)域的無人零售、無人藥房、立體清潔等工業(yè)領(lǐng)域的復(fù)雜工序,未來可進一步延伸到消費領(lǐng)域。
附上完整的視頻鏈接:https://v.qq.com/x/page2qji/a3551ly.html
本文僅代表作者觀點,版權(quán)歸原創(chuàng)者所有,如需轉(zhuǎn)載請在文中注明來源及作者名字。
免責(zé)聲明:本文系轉(zhuǎn)載編輯文章,僅作分享之用。如分享內(nèi)容、圖片侵犯到您的版權(quán)或非授權(quán)發(fā)布,請及時與我們聯(lián)系進行審核處理或刪除,您可以發(fā)送材料至郵箱:service@tojoy.com