夕小瑤科技說 原創(chuàng)
 作者 | 小戲、ZenMoore

就在今天！OpenAI 悶聲放了一個大招！

圖片

還沒有官宣，還沒有發(fā)布會，也沒有大肆報道與關注。OpenAI 這次僅僅以灰度測試的方式，給部分用戶發(fā)布了一個可以說“整合了幾乎所有可用工具”的完全版 GPT-4 智能體版本。

再具體一點，這次更新，將之前版本相互獨立各自分離的 Agent 功能統(tǒng)一了起來。之前 GPT-4 的工作模式是四個獨立的功能（一個對話窗口內只能使用其中一個特性）：

• 圖像上傳 + GPT-4
• 插件 + GPT-4
• 代碼運行器 + 文件上傳 + GPT-4
• 圖像生成 + GPT-4

這次更新使其變成了：

• GPT-4 + 圖像上傳 + 插件 + 代碼運行器 + 文件上傳 + 圖像生成

All In One!

例如，我想實現(xiàn)扔給 GPT-4 一張圖，讓 GPT-4 完成圖像理解再根據(jù)我的 Prompt 要求完成新圖像的生成，之前的 GPT-4 是無法做到這個事情的，因此當你使用圖像生成功能的時候就無法上傳圖片。而更新完成之后，現(xiàn)在可以做到自動圖像編輯啦！ 如下圖所示：

圖片

這看似是一個小小的更新，但實際上是通過把之前分開的各種 Agent Feature 整合在一起從而將 GPT-4 真正進化為了一個“理解一切，處理一切，生成一切”的超級統(tǒng)一智能體！

回顧 OpenAI 的官方說明，可能其中最為關鍵的詞句就是其中的“automatic”一詞

圖片

什么是“automatic”，那就是針對用戶輸入的任意一個任務，現(xiàn)在的 GPT-4 可以自動的選擇并組合使用各種它可以使用的工具，以完成用戶的特定的任務目標。換言之，之前通過用戶人為切換插件完成的任務，更新后的 GPT-4 (All Tools) 類似 AutoGPT，可以一體化的完成如意圖識別，任務分配，工具調用等諸多任務，GPT-4 也由此完成了單一的大模型到智能體的進化。

圖片

舉個網(wǎng)友的例子，如果我希望讓 GPT-4 生成一個當前時間丹佛的天氣圖，拆解這個任務，GPT-4 需要做的不僅僅是使用 DALLE 3 生成一張圖片，而是還需要查詢當前時刻丹佛的天氣，這需要調用另一個 API，而如下圖所示，GPT-4（All Tools）現(xiàn)在可以自動的完成這一套任務。

圖片

再來一個更復雜的任務，如果要求 GPT-4 依次反復使用它所能使用的所有工具來生成一張炫酷有趣的創(chuàng)意圖片，GPT-4 會怎么樣呢？

圖片

如上圖所示，GPT-4 完美的理解了任務的要求，首先使用了 DALLE 創(chuàng)建初始圖像，并以“抽象”，“懷舊”，“希望”等為主題設計了輸入 DALLE 的 Prompt，生成了初始的圖像

圖片

接著通過調用 Python，分析生成圖像中的顏色，確定主導色調，最終經(jīng)過一系列 GPT-4 的神操作，GPT-4 交出了這樣一個答卷，先不論其中藝術性如何，但可以看出 GPT-4 已經(jīng)可以熟練的玩轉各種工具。

圖片

再來一個例子，對于一個 PDF 信息提取的任務，之前的版本可能還需要額外使用 Advanced Data Analysis 功能上傳附近才可以辦到，而新版本的 GPT-4 則將多類型文件完全統(tǒng)一，直接上傳 PDF 便可以和 GPT-4 暢快 Chat。

圖片

當然，目前的目前，GPT-4 的這次升級還沒有正式發(fā)布，只是以灰度測試的形式“走漏了一點風聲”，不過哪怕僅僅看到這些蛛絲馬跡，但也足夠讓人期待完全版 GPT-4 會為我們帶來什么樣的想象空間。

圖片