
可能是史上最強大 AI Agent!OpenAI 重磅更新:整合了多模態、外部訪問、數據分析後的 GPT-4 更像是 AI Agent 了!

在一次對話中自主選擇調用多個不同工具完成用户的輸入指令。
目前最強的大語言模型必然是 OpenAI 的 GPT-4 模型,此前 OpenAI 的 ChatGPT Plus 版本為 GPT-4 模型提供了多個強大的插件供大家使用,包括基於 Bing 的帶網絡瀏覽的 Browse、文本生成圖片的 DALL·E3、高級數據分析功能等。就在幾個小時前,OpenAI 的部分用户收到了官方的一個非常重磅的更新,即上傳任意文檔的分析以及整合了所有工具後的 GPT-4!這個功能被稱為 GPT-4(All Tools)!這個工具可以在一次對話中自主選擇調用多個不同工具完成用户的輸入指令,非常接近 AI Agent 形態!

- ChatGPT 新功能一:上傳任意文檔分析
- ChatGPT 新功能二:整合所有工具,不再需要手動切換
- 為什麼整合後的 GPT-4 像 AI Agent?實例證明
- 查詢天氣並歸類,然後生成圖片
- 為什麼是 GPT-4 推出這樣的整合了各種工具的 AI Agent 模式
ChatGPT新功能一:上傳任意文檔分析
此前,OpenAI 的 ChatGPT Plus 用户如果像分析 PDF 之類的文檔,需要單獨選擇 Advanced Data Analysis 功能,然後點擊上傳附件才能分析。如下圖所示:

而這個功能説實話並不是很好,尤其是 PDF 文檔的分析,與 Anthropic 的 Claude2 相比那真的是有點遜色。不過,官方將這個功能放到 Advanced Data Analysis 中可能本來就是定位做數據分析而非文檔理解的。
此次更新後的第一個功能就是你可以上傳任意文檔,包括 PDFs、數據文件等做分析。按照官方的功能提示,這個應該是比之前支持更多的文檔類型。
ChatGPT新功能二:整合所有工具,不再需要手動切換
ChatGPT Plus 用户是可以通過 GPT-4 完成很多任務的,此前都是插件的形式進行切換,如下圖所示:

而此次更新的第二個功能是整合工具後的 GPT-4 不再需要切換即可使用所有的功能。也就是説,GPT-4將根據你給的指令理解你的意圖,自動使用不同的工具完成任務!
這個功能意味着 GPT-4 將比此前更加智能,而且非常像此前大家説的 AI Agent 的能力。
為什麼整合後的 GPT-4 像 AI Agent?實例證明
新的 GPT-4 將直接根據你的輸入自動選擇工具完成你的任務,那麼這裏就涉及了意圖理解、任務規劃、工具使用等。基本上就類似當前的 AI Agent 的工作原理,包括此前的 AutoGPT、MetaGPT 等都是類似的思路。
以網友的實測為例,在新的 GPT-4 模式下,你可以直接輸入如下類似如下內容:讓 GPT-4 查詢 2023 年某個地方的天氣,並展示總結這些天氣結果,並生成未來類似的天氣。
當前已經有網友測試了很多例子。我們這裏展示一個最震撼的案例:
查詢天氣並歸類,然後生成圖片
該用户跟 GPT-4 説,讓它找一下 Altantic 的 2023 颶風季節的數據,然後用信息圖展示颶風的級別和大小。再根據所在地生成最像的一個颶風圖像。

可以看到,GPT-4 準確理解了用户的意圖,首先瀏覽網頁查詢天氣,並做了 2 次的圖片生成工作,第一次是總結天氣類型,第二次是生成未來的天氣圖!
儘管這裏是用户提供了一些具體的步驟,但是 GPT-4 的生成結果是連續調用了多個工具沒有中斷。想象一下,如果給出一個目標任務,讓 GPT-4 自己根據任務的複雜的規劃步驟,並考慮每個步驟使用什麼樣的工具,那麼這就是一個 AI Agent 形態了!這真的是一個巨大的功能!
為什麼是 GPT-4 推出這樣的整合了各種工具的 AI Agent 模式
除去開源項目,當前主流的大模型供應商其實都沒有這樣一個整合了多個工具的單模型入口。即輸入一個指令,然後模型根據需要自己調用多個工具解決問題。原因主要在於 AI Agent 需要一個非常強大的大語言模型作為控制器才能運轉得好。而這樣的大語言模型需要具備如下幾個能力:
強大的理解能力:這是基本的能力,儘管很多模型的意圖理解都還可以,但是涉及到複雜的意圖,那麼 GPT-4 目前是最強大的。
強大的任務規劃與分解能力:對於 AI Agent 來説,理解了意圖之後要完成意圖需要分解目標,規劃任務並能找到合適的路徑完成才是最重要的。
儘管説上面兩個能力看似很多模型都有,但是實際上只有 GPT-4 才有一定的商用水平。在一開始 GPT-4 推出的時候,OpenAI 就説過,GPT-4 最大的不同是對於複雜任務的理解和解決能力,比 GPT-3.5 要明顯地高。而這也是 GPT-4 可以推出這樣整合模型的一個重要保障!
不過目前 DataLearnerAI 的工作人員還沒有收到該更新,想必又是 1-2 周的等待了!
文章來源:DataLearner 原文標題:《可能是史上最強大 AI Agent!OpenAI 重磅更新:整合了多模態、外部訪問、數據分析後的 GPT-4 更像是 AI Agent 了!》
風險提示及免責條款
市場有風險,投資需謹慎。本文不構成個人投資建議,也未考慮到個別用户特殊的投資目標、財務狀況或需要。用户應考慮本文中的任何意見、觀點或結論是否符合其特定狀況。據此投資,責任自負。
