中國(guó)自動(dòng)化學(xué)會(huì)專(zhuān)家咨詢(xún)工作委員會(huì)指定宣傳媒體
新聞詳情
gkongbbs

ChatGPT已能操控機(jī)器人,工程師連代碼都不用寫(xiě),網(wǎng)友:微軟在搞天網(wǎng)?

http://casecurityhq.com 2023-03-28 09:52 來(lái)源:BFT機(jī)器人

  當(dāng)我們還在跟ChatGPT吹牛尬聊時(shí),有人已經(jīng)在拿它操控機(jī)器人了。不是別人,正是OpenAI的金主爸爸、不久前剛拿ChatGPT“重新發(fā)明搜索引擎”的微軟。

  到目前為止,開(kāi)發(fā)者調(diào)教機(jī)器人不僅技術(shù)門(mén)檻高,還道阻且長(zhǎng):工程師需要在工作流程回路中,不斷手寫(xiě)新代碼和規(guī)范來(lái)糾正機(jī)器人行為;另外,操控不同的機(jī)器人可能需要不同的編程語(yǔ)言和環(huán)境。

  而在ChatGPT的幫助下,工程師甚至不用手寫(xiě)代碼——直接用人話描述想做什么,AI就能自動(dòng)翻譯成機(jī)器語(yǔ)言。

  這意味著,一方面專(zhuān)業(yè)人士與機(jī)器人的交互效率起飛;另一方面,技術(shù)門(mén)檻也降低一大截,外行人甚至也能參與調(diào)試,創(chuàng)造出更多使用方法。

  舉個(gè)簡(jiǎn)單的例子:讓無(wú)人機(jī)自動(dòng)檢查貨架。

  首先,操作者只需用自然語(yǔ)言給ChatGPT提出要求;然后,AI就能自動(dòng)翻譯成代碼,并指揮無(wú)人機(jī)行動(dòng)。(還可以規(guī)定無(wú)人機(jī)的飛行路徑。)

  難怪特斯拉前AI主管Andrej Karpathy會(huì)調(diào)侃:最新的熱門(mén)編程語(yǔ)言是英語(yǔ)。

  01一個(gè)AI指揮多種機(jī)器人

  實(shí)際上,ChatGPT會(huì)玩兒的花樣可多了。

  比如,一位操作者跟AI說(shuō):“我渴了,請(qǐng)幫我找個(gè)喝的。”此時(shí)AI并不會(huì)直愣愣地就去找水了,而是會(huì)很機(jī)靈地反問(wèn):請(qǐng)問(wèn)你想喝哪種?這里有好幾種飲料,比如椰子水、可樂(lè)等等。

  當(dāng)然操作者也不是吃素的,他并未直接告訴AI選哪個(gè),而是說(shuō):“我剛從健身房回來(lái),請(qǐng)幫我找個(gè)健康點(diǎn)兒的飲料。”

  然后更神奇的操作就開(kāi)始了,AI先是猜測(cè)他想喝椰子水,然后自己噼里啪啦寫(xiě)出一段代碼(甚至還有注釋?zhuān)?/p>

  寫(xiě)完就自己指揮無(wú)人機(jī)去找椰子水。

  除了無(wú)人機(jī),ChatGPT還能輕松操控別的小機(jī)器人,包括攝像頭、機(jī)械臂等等。

  比如讓攝像頭在房間里找出能加熱午飯的東西。

  還有指揮機(jī)械臂拼出一個(gè)微軟的Logo(悄悄夾帶私貨)

  看到這些,有網(wǎng)友腦洞大開(kāi),有人發(fā)問(wèn):他們是不是正在建立無(wú)所不能的天網(wǎng)?

  不過(guò)話說(shuō)回來(lái),其實(shí)離網(wǎng)友說(shuō)的這些還差得遠(yuǎn),畢竟現(xiàn)在還是需要人類(lèi)參與的。

  02怎么實(shí)現(xiàn)的?

  從前文可以看出,這只靈活的AI不僅與人交流暢通無(wú)阻,而且和機(jī)器也能快速溝通。這主要得益于微軟團(tuán)隊(duì)專(zhuān)門(mén)開(kāi)發(fā)的一系列API和高級(jí)函數(shù)庫(kù)。

  他們沒(méi)有讓ChatGPT背后的語(yǔ)言大模型(LLM),生成某固定種類(lèi)的代碼;因?yàn)闄C(jī)器人是個(gè)多元化領(lǐng)域,這樣可能會(huì)在不同場(chǎng)景下涉及大量微調(diào)。

  而在新穎的操作框架下,不同機(jī)器人,都有自己對(duì)應(yīng)的特定函數(shù)庫(kù)——一個(gè)AI,就能適應(yīng)不同的對(duì)象、不同的任務(wù)。

  一方面,這些函數(shù)庫(kù),能夠連接到機(jī)器人控制系統(tǒng)中管理底層硬件,以及執(zhí)行基本運(yùn)動(dòng)的代碼和功能模塊。

  另一方面,為了讓ChatGPT也能遵循函數(shù)庫(kù)的規(guī)則,預(yù)定義函數(shù)命名就很關(guān)鍵。清晰的函數(shù)名,能讓各API之間建立良好的功能連接,最終生成高質(zhì)量的回答。

  其中一項(xiàng)要求,就是所有API名稱(chēng)必須描述整體功能行為。

  例如,detect_object(object_name) 函數(shù)可以在內(nèi)部鏈接到OpenCV函數(shù)或計(jì)算機(jī)視覺(jué)模型。

  設(shè)計(jì)好庫(kù)和API后,微軟給ChatGPT編寫(xiě)了一個(gè)文本提示(prompt),描述目標(biāo)任務(wù),并明確說(shuō)明函數(shù)庫(kù)中哪些函數(shù)可用;另外,這還能規(guī)定ChatGPT生成代碼用哪種編程語(yǔ)言。

  值得一提的是,AI生成內(nèi)容效果,和人為提示的質(zhì)量呈正相關(guān)。為此,微軟還開(kāi)發(fā)了一個(gè)協(xié)作開(kāi)源平臺(tái)PromptCraft,任何人都能在此分享不同類(lèi)機(jī)器人的Prompt策略。

  到此,幕后部署基本完成,然后用戶(hù)就能通過(guò)“說(shuō)人話”間接操控機(jī)器人了。

  如果想要檢查AI生成的代碼是否有Bug,隨時(shí)都能在聊天框直接檢查,或通過(guò)模擬器測(cè)試,人類(lèi)可以用自然語(yǔ)言指導(dǎo)AI進(jìn)行修正。

  另外,還能到等到用戶(hù)對(duì)解決方案滿意為止,再將ChatGPT生成代碼部署到機(jī)器人上。

  最后,如果是你,會(huì)想用ChatGPT操控機(jī)器人做些什么呢?

版權(quán)所有 中華工控網(wǎng) Copyright?2024 Gkong.com, All Rights Reserved