初創公司 的英国無人駕駛汽車現在支持了語音交流，乘客可以詢問係統的公司駕駛決策，並得到答案。使用实背後的技术街头接受想法是使用與 ChatGPT 相同的技術來幫助訓練無人駕駛汽車。

該公司將其現有的训练训练自動駕駛軟件與一個大型語言模型相結合，創建了一個名為 LINGO-1 的无人混合模型。LINGO-1 可以將視頻數據和駕駛數據（汽車每秒采取的车让车辆行動），與捕捉汽車所見所做的英国自然語言描述同步。

這家總部位於英國的公司在過去幾年裏取得了一係列突破。2021 年，使用实它展示了自己的技术街头接受車輛可以在倫敦街頭接受人工智能訓練，並在英國其他四個城市使用人工智能駕駛汽車，训练训练這一挑戰通常需要進行重大的无人工程再造。2022 年，车让车辆它使用同樣的英国人工智能駕駛了不止一種類型的車輛，這也是該行業的首創。現在它實現了和汽車聊天。

在該公司本周給我的一個演示中，其 CEO 艾利克斯·肯德爾（）播放了一輛捷豹 I-PACE 汽車拍攝的視頻，然後跳到視頻的一個隨機時間點，並開始提問：“天氣怎麽樣？”答：天氣多雲。“你看到了什麽危險？”答：左邊有一所學校。“你為什麽停車？”答：因為紅綠燈是紅色的。

說：“在過去的幾周裏，我們看到了一些了不起的事情。我從來沒有想過要問這樣的問題，但是你看這個。”他輸入：“右邊的建築有多少層？”答：三層。

“看到沒！”他說，聽起來像個驕傲的爸爸。“我們從未訓練它去實現這一點。這真的讓我們感到驚訝。我們認為這是人工智能安全方麵的突破。”

“我對 LINGO-1 的能力印象深刻，”美國加州大學伯克利分校的機器人研究員、機器人公司 的聯合創始人皮特·阿比爾（）表示，他嚐試了這項技術的演示。問 LINGO-1，如果“如果燈是綠色的，你會怎麽辦？”

“它幾乎每次都給出了非常準確的答案，”他說。

希望通過詢問自動駕駛軟件的每一步行為，準確了解其汽車為什麽以及如何做出某些決定。大多數時候，汽車開得很好。但當汽車行駛出現問題時，就可能很難辦，正如 和 等行業領先者所發現的那樣。

這兩家公司都在美國幾個城市部署了小規模的無人駕駛出租車車隊。但技術遠非完美。 和 的汽車發生了多起輕微碰撞（據報道 殺死了一隻狗），並在不知所措時阻礙了交通。

舊金山官員聲稱，2023 年 8 月兩輛 汽車擋住了一輛載有一名傷者的救護車，該傷者後來在醫院不治身亡。 否認了官方的說法。

希望，當自己的汽車做錯了什麽時，可以要求它們解釋自己的行為，這將比仔細查看視頻回放或單純查看錯誤報告更快地發現缺陷。

說：“自動駕駛最關鍵的挑戰是安全。有了 LINGO-1 這樣的係統，我想你會更好地了解它對駕駛的理解。”他說，這使得弱點識別變得更容易。

說，下一步是用語言來訓練汽車。為了訓練 LINGO-1， 讓其專業司機團隊，其中一些是前駕駛教練，在駕駛時大聲說話，解釋他們在做什麽以及為什麽這樣做：他們為什麽加速，為什麽減速，他們意識到了什麽危險。

該公司利用這些數據對模型進行微調，為其提供駕駛技巧，就像教練指導人類學員一樣。說，告訴汽車如何做某事，而不僅僅是展示它，可以大大加快訓練速度。

並不是第一個在機器人技術中使用大型語言模型的公司。其他公司，包括和 Abbeel 的 公司，正在使用自然語言測試或指導家用或工業機器人。這種混合技術甚至有一個名字：視覺語言動作模型（VLAM，visual-language-action models）。但 是第一個將 VLAM 用於自動駕駛的公司。

說：“人們經常說一圖勝千言，但在機器學習中，情況恰恰相反。幾句話抵得上一千張圖片。”一張圖片包含大量冗餘數據。他說：“當你開車的時候，你不在乎天空，也不在乎前車的顏色，或者諸如此類的東西。文字可以集中在重要的信息上。”

紐約大學機器人研究員樂瑞爾·賓圖（）說：“ 的方法特別有趣且獨特。”他尤其喜歡 LINGO-1 解釋其行為的方式。

但他很好奇當模型瞎編亂造時會發生什麽。“我不相信大型語言模型會完全輸出真實的東西，”他說，“我不確定我是否可以信任它們來接管我的車。”

佐治亞理工學院的研究員烏雲普爾·愛桑（）也有類似的保留意見，他致力於研究讓人工智能向人類解釋其決策的方法。說：“用簡單的話說，大型語言模型可以生成很棒的廢話。我們需要貼上亮黃色的‘警告’標簽，確保生成的語言不包含‘幻覺’。”

非常清楚這些問題，並正在努力使 LINGO-1 盡可能準確。說：“我們在任何大型語言模型中都看到了同樣的挑戰。這當然還不完美。”

與非混合模型相比，LINGO-1 的一個優勢是，它的回應是基於相關的視頻數據的。理論上，這應該使 LINGO-1 更加真實可信。

說，這不僅僅是關於汽車的。“人類進化出語言是有原因的：這是我們所知道的、交流複雜話題最有效的方式。我認為智能機器也是如此。我們未來與機器人互動的方式將是通過語言完成的。”

對此表示讚同。“我認為我們即將看到機器人技術的革命，”他說。

作者簡介：威爾·道格拉斯·海文（Will Douglas Heaven）是《麻省理工科技評論》人工智能欄目的高級編輯，他在這裏報道新的研究、新興趨勢及其背後的人。此前，他是英國廣播公司（BBC）科技與地緣政治網站 Future Now 的創始編輯，也是 New Scientist 雜誌的首席技術編輯。他擁有英國倫敦帝國理工學院計算機科學博士學位，深諳與機器人合作的體驗。

支持：Ren

運營/排版：何晨龍

由 DeepTech 攜手《麻省理工科技評論》重磅推出的《科技之巔：全球突破性技術創新與未來趨勢（20 周年珍藏版）》已開售！點擊下方海報可購買圖書！！