波士頓動力公司利用ChatGPT將機器狗變成會說話的導遊


我們看到機器狗Spot會跑、會跳,甚至會跳舞......但現在我們可以看到Spot說話。在波士頓動力公司(BostonDynamics)發佈的一段視頻中,我們看到它的機器狗戴著高帽子,留著小胡子,瞪著炯炯有神的眼睛,用英國口音與工作人員聊天,帶他們參觀公司的設施。

boston_dynamics_spot_tourguide.webp

"我們可以開始旅程嗎?"Spot 問。"充電站是斑斑機器人休息和充電的地方,也是我們第一個要參觀的地方。請跟我來,先生們。"正如演示中所示,Spot 能夠回答問題,甚至還能張開"嘴巴",讓人覺得它真的在說話。

為讓 Spot"說話",波士頓動力公司使用 OpenAI 的 ChatGPT API 和一些開源的大型語言模型(LLM)來仔細訓練它的回答。然後,它為機器人配備揚聲器,增加文本到語音功能,並讓它像木偶的嘴一樣"模仿說話"。

波士頓動力公司的首席軟件工程師馬特-克林根斯密斯(Matt Klingensmith)說,團隊為 Spot 提供一個"非常簡短的腳本",內容涉及公司設施中的每個房間。然後,機器人將腳本與它從抓手和身體上的攝像頭獲得的圖像結合起來,讓它"在產生反應之前獲得更多關於它所看到的信息"。據該公司稱,Spot 使用視覺問題解答模型為圖像添加標題,並回答有關圖像的問題。

"花式管傢"並不是 Spot 在視頻中扮演的唯一角色。這個四條腿的機器人還化身為 20 世紀 20 年代的考古學傢、青少年和莎士比亞筆下的時空旅行者。當被要求寫一首俳句時,它還會說"發電機在房間裡低聲嗡嗡作響,發電機在沒有歡樂的房間裡低聲哼唱,很像我的靈魂"。

波士頓動力公司表示,在將 Spot 作為導遊進行試驗時,他們發現一些意外情況。有一次,團隊問 Spot 它的"父母"是誰,結果它走到公司辦公室裡陳列的老款 Spot 模型的地方。該公司還指出,在一些情況下,LLM 仍然會胡編亂造,比如說它設計用來搬箱子的機器人 Stretch 是為瑜伽而生的。

"我們很高興能繼續探索人工智能與機器人技術的交叉點,"克林恩史密斯在波士頓動力公司網站的一篇文章中寫道。"這些模型(LLMs)可以幫助提供文化背景、一般常識性知識和靈活性,這對許多機器人任務都很有用--例如,隻需與機器人對話就能為其分配任務,這將有助於降低使用這些系統的學習曲線。"

雖然在視頻中,"斑點"聽起來和看起來都很傻,但還是讓人很難不聯想到這個像狗一樣的機器人開門和監視人的能力。畢竟,它隨時有可能成為警察和軍隊的工具。


相關推薦

2023-10-28

人開發商波士頓動力(Boston Dynamics)在官網宣佈,通過將ChatGPT、Spot以及其他AI模型相結合,開發一種會說話的導遊機器狗。據解,為讓Spot開口說話,波士頓動力公司使用OpenAI的ChatGPT API以及一些開源的大語言模型來訓練它的反

2022-10-23

靈活。這個吊打特斯拉的公司,就是擅長讓機器人整活的波士頓動力,你能在網上看到的炫酷機器人,幾乎都是它傢的。論技術,波士頓動力是全球第一,論人氣,它傢的每個機器人在全球都有百萬粉絲。但這樣一個實力型企業

2024-04-01

美國警察最新公佈一則案件:波士頓動力機器狗首次被槍殺陣亡。官方圖顯示,機器狗身上有多處槍傷,金屬外殼凹陷,油漆脫落,已經無法繼續使用。對於機器狗此番犧牲,警方也給予高度評價:這是在為人類執法夥伴擋住子

2022-07-21

感器信息、運行反射回路並調整其運動方式來學習走路。波士頓動力公司的迷你機器狗SpotMini在2017年11月發佈的一段視頻中,美國波士頓動力公司首次展示其開發的最先進的機器狗SpotMini。在此之前,該公司還發佈一款1.7米高的

2024-03-15

OpenAI借著另一傢機器人公司,祭出另外一個殺手鐧——把ChatGPT裝到機器人的腦子裡。看他們放出來的視頻 demo ,這個大概一米七的機器人,不僅能聽懂人話,做起事兒來也相當麻溜。問站它在那裡都能看到啥,還沒反應幾秒,

2022-11-16

波士頓動力公司正在起訴競爭對手,機器人制造商GhostRobotics,指控其侵犯與Spot四足機器人有關的七項專利,這可能會演變成一場機器人犬類之間的知識產權大亂鬥。在提交給特拉華州聯邦法院的訴狀中,波士頓動力公司GhostRobot

2024-06-14

14日消息,日前,有網友分享中國公司研發的機器狗,與波士頓動力機器狗爬樓梯的比賽視頻,引起網友關註。視頻中,這條中國機器狗爬樓梯的速度明顯更快,且腳部輕盈,不一會就爬上樓梯平層,領先波士頓機器狗四五個臺

2023-01-31

如何讓一個機器人尷尬?波士頓動力發佈Atlas失誤集錦,全網圍觀機器人翻車的各種樣子!上周,波士頓動力公司分享一段仿人機器人Atlas變身“工地打工機器人”的視頻。視頻中的Atlas活動自如。抬抬木板、搬搬磚什麼的,都不

2022-11-18

;amp;quot;阻礙性的和毫無根據的"。聲明中指出:波士頓動力公司並非沒有註意到Ghost Robotics的成功。該公司沒有在一個公平的競爭環境中進行競爭,而是選擇在11月11日提起阻礙性和毫無根據的訴訟,試圖阻止這個新來者

2023-04-12

mp;amp;quot;。Digidog--也被稱為Spot--是由現代汽車公司旗下的波士頓動力公司制造的遙控機器人。它被設計用來在可能對人類構成威脅的情況下工作,幫助做一些事情,如在危險地區進行探測和監測建築工地。然而,波士頓動力公司

2022-10-18

機器人搞花活,還得是波士頓動力——自傢的Spot和Atlas機器人聯動跳起男團BTS的舞蹈。開場,先是派出7隻Spot站好隊形,大跳齊舞。動作可以說是整齊劃一,不論是蹦跳、走位,隊形絲毫沒有偏差。原標題:波士頓動力再驚艷!

2022-07-21

擊手遙控。或去年4月,法國軍隊開始在戰鬥場景中測試波士頓動力公司的機器狗Spot--不過當時沒有任何明顯的狗裝武器。或沒有狗腿的小型機器人--比如說小型無人機--被裝備上武器裝備。世界正在逐漸認識到,將機器人變成致

2024-04-17

波士頓動力的Atlas,今日正式宣佈退役!在最後一段告別視頻裡,它依然在奔跑、跳躍、後空翻、甚至摔倒在地,從膝蓋噴出液壓油,讓屏幕前的幾十萬觀眾跟著喊疼。或許液壓系統真的過時,Atlas的退役,標志著一個時代的結

2024-02-06

表Ddog項目,通過自己開發的腦機接口(BCI)設備,控制波士頓動力的機器狗Spot。狗狗可以按照人類的想法,移動到特定區域、幫人拿東西、或者拍照等。而且,相比於之前需要使用佈滿傳感器的頭套才能“讀心”,本次的腦機