在當(dāng)今數(shù)字化飛速發(fā)展的時(shí)代，人工智能（AI）已經(jīng)滲透到我們生活的方方面面。從簡(jiǎn)單的語(yǔ)音助手到復(fù)雜的自動(dòng)化系統(tǒng)，AI的應(yīng)用場(chǎng)景不斷拓展。然而，對(duì)于開(kāi)發(fā)者和企業(yè)來(lái)說(shuō)，如何將AI技術(shù)轉(zhuǎn)化為實(shí)際可用的智能代理（agents），一直是他們面臨的挑戰(zhàn)。今天，OpenAI正式發(fā)布了首批構(gòu)建模塊，旨在幫助開(kāi)發(fā)者和企業(yè)打造實(shí)用且可靠的智能代理。這些代理能夠獨(dú)立完成用戶委托的任務(wù)，極大地提升工作效率。

一、智能代理的崛起：從概念到現(xiàn)實(shí)

在過(guò)去的一年中，OpenAI不斷引入新的模型能力，例如高級(jí)推理、多模態(tài)交互以及新的安全技術(shù)，這些都為構(gòu)建復(fù)雜多步驟任務(wù)的智能代理奠定了基礎(chǔ)。然而，許多客戶反饋，將這些能力轉(zhuǎn)化為生產(chǎn)就緒的智能代理并非易事，往往需要大量的提示迭代和自定義編排邏輯，且缺乏足夠的可見(jiàn)性或內(nèi)置支持。

為了解決這些挑戰(zhàn)，OpenAI推出了一系列全新的API和工具，專門用于簡(jiǎn)化智能代理應(yīng)用的開(kāi)發(fā)。這些工具不僅優(yōu)化了核心代理邏輯、編排和交互，還讓開(kāi)發(fā)者能夠更加輕松地開(kāi)始構(gòu)建智能代理。在未來(lái)幾周和幾個(gè)月內(nèi)，OpenAI還將繼續(xù)發(fā)布更多工具和功能，進(jìn)一步簡(jiǎn)化和加速在平臺(tái)上構(gòu)建智能代理應(yīng)用的進(jìn)程。

二、重磅推出：Responses API

Responses API是OpenAI為構(gòu)建智能代理而推出的新API基礎(chǔ)。它結(jié)合了Chat Completions API的簡(jiǎn)潔性與Assistants API的工具使用能力。隨著模型能力的不斷發(fā)展，Responses API將為開(kāi)發(fā)者構(gòu)建智能代理應(yīng)用提供更靈活的基礎(chǔ)。通過(guò)單一的Responses API調(diào)用，開(kāi)發(fā)者可以利用多種工具和模型輪次解決日益復(fù)雜的任務(wù)。

（一）Responses API的亮點(diǎn)

Responses API支持新的內(nèi)置工具，如網(wǎng)絡(luò)搜索、文件搜索和計(jì)算機(jī)使用。這些工具旨在協(xié)同工作，將模型與現(xiàn)實(shí)世界連接起來(lái)，使其在完成任務(wù)時(shí)更具實(shí)用性。此外，它還帶來(lái)了多項(xiàng)可用性改進(jìn)，包括統(tǒng)一的基于項(xiàng)目的界面設(shè)計(jì)、更簡(jiǎn)單的多態(tài)性、直觀的流式事件以及SDK輔助工具，例如??response.output_text??，方便開(kāi)發(fā)者輕松訪問(wèn)模型的文本輸出。

Responses API專為希望輕松將OpenAI模型和內(nèi)置工具集成到其應(yīng)用中的開(kāi)發(fā)者設(shè)計(jì)，無(wú)需復(fù)雜地整合多個(gè)API或外部供應(yīng)商。該API還簡(jiǎn)化了在OpenAI上存儲(chǔ)數(shù)據(jù)的過(guò)程，開(kāi)發(fā)者可以利用追蹤和評(píng)估等功能來(lái)評(píng)估代理性能。需要提醒的是，OpenAI默認(rèn)不會(huì)使用商業(yè)數(shù)據(jù)訓(xùn)練模型，即使數(shù)據(jù)存儲(chǔ)在OpenAI上。從今天起，該API對(duì)所有開(kāi)發(fā)者開(kāi)放，并且不單獨(dú)收費(fèi)——代幣和工具的費(fèi)用按照定價(jià)頁(yè)面上規(guī)定的標(biāo)準(zhǔn)費(fèi)率計(jì)費(fèi)。開(kāi)發(fā)者可以查看Responses API快速入門指南，了解更多詳情。

（二）對(duì)現(xiàn)有API的影響

Chat Completions API

Chat Completions仍然是OpenAI最受歡迎的API，OpenAI將繼續(xù)全力支持其新模型和功能。對(duì)于不需要內(nèi)置工具的開(kāi)發(fā)者，可以繼續(xù)放心使用Chat Completions。不過(guò)，Responses API是Chat Completions的超集，具有相同的卓越性能，因此對(duì)于新的集成，OpenAI建議從Responses API開(kāi)始。

Assistants API

根據(jù)開(kāi)發(fā)者對(duì)Assistants API測(cè)試版的反饋，OpenAI將關(guān)鍵改進(jìn)融入了Responses API，使其更加靈活、快速且易于使用。OpenAI正在努力實(shí)現(xiàn)Assistants和Responses API之間的完全功能對(duì)等，包括支持類似Assistant和Thread的對(duì)象以及代碼解釋器工具。一旦完成，OpenAI計(jì)劃在2026年中期宣布正式棄用Assistants API，并提供一個(gè)明確的從Assistants API遷移到Responses API的指南，以便開(kāi)發(fā)者保留所有數(shù)據(jù)并遷移其應(yīng)用。在正式宣布棄用之前，OpenAI將繼續(xù)向Assistants API提供新模型。Responses API代表了在OpenAI上構(gòu)建智能代理的未來(lái)方向。

三、Responses API中的內(nèi)置工具

（一）網(wǎng)絡(luò)搜索

開(kāi)發(fā)者現(xiàn)在可以利用網(wǎng)絡(luò)搜索獲取快速、最新且相關(guān)性強(qiáng)的答案，并附上清晰的引用來(lái)源。在Responses API中，當(dāng)使用??gpt-4o???和??gpt-4o-mini??時(shí)，網(wǎng)絡(luò)搜索可作為工具使用，并且可以與其他工具或函數(shù)調(diào)用結(jié)合。

const response = await openai.responses.create({
    model: "gpt-4o",
    tools: [ { type: "web_search_preview" } ],
    input: "What was a positive news story that happened today?",
});
console.log(response.output_text);

在早期測(cè)試中，開(kāi)發(fā)者將網(wǎng)絡(luò)搜索應(yīng)用于多種場(chǎng)景，包括購(gòu)物助手、研究代理和旅行預(yù)訂代理——任何需要及時(shí)從網(wǎng)絡(luò)獲取信息的應(yīng)用場(chǎng)景。例如，Hebbia利用網(wǎng)絡(luò)搜索工具，幫助資產(chǎn)管理公司、私募股權(quán)和信貸公司以及律師事務(wù)所從廣泛的公共和私有數(shù)據(jù)集中快速提取可操作的見(jiàn)解。通過(guò)將實(shí)時(shí)搜索能力整合到他們的研究工作流程中，Hebbia提供了更豐富、更具針對(duì)性的市場(chǎng)情報(bào)，并持續(xù)提升其分析的精確性和相關(guān)性，超越當(dāng)前的基準(zhǔn)。

網(wǎng)絡(luò)搜索在API中的表現(xiàn)與ChatGPT搜索所使用的模型相同。在SimpleQA基準(zhǔn)測(cè)試中，該測(cè)試評(píng)估LLM在回答簡(jiǎn)短事實(shí)性問(wèn)題時(shí)的準(zhǔn)確性，??GPT-4o???搜索預(yù)覽和??GPT-4o mini??搜索預(yù)覽分別獲得了90%和88%的準(zhǔn)確率。

網(wǎng)絡(luò)搜索生成的響應(yīng)中包含指向來(lái)源的鏈接，例如新聞文章和博客帖子，為用戶提供了進(jìn)一步了解的途徑。這些清晰的內(nèi)聯(lián)引用讓用戶以全新的方式與信息互動(dòng)，同時(shí)內(nèi)容所有者也獲得了接觸更廣泛受眾的新機(jī)會(huì)。

任何網(wǎng)站或出版商都可以選擇在API的網(wǎng)絡(luò)搜索中出現(xiàn)。網(wǎng)絡(luò)搜索工具目前以預(yù)覽形式向所有開(kāi)發(fā)者開(kāi)放。此外，OpenAI還在Chat Completions API中通過(guò)??gpt-4o-search-preview???和??gpt-4o-mini-search-preview???為開(kāi)發(fā)者提供了直接訪問(wèn)其微調(diào)搜索模型的權(quán)限。??GPT-4o???搜索和??4o-mini??搜索的定價(jià)分別為每千次查詢30美元和25美元。開(kāi)發(fā)者可以在Playground中體驗(yàn)網(wǎng)絡(luò)搜索，并在文檔中了解更多詳情。

（二）文件搜索

開(kāi)發(fā)者現(xiàn)在可以使用改進(jìn)后的文件搜索工具輕松從大量文檔中檢索相關(guān)信息。該工具支持多種文件類型、查詢優(yōu)化、元數(shù)據(jù)過(guò)濾和自定義重排，能夠快速、準(zhǔn)確地返回搜索結(jié)果。同樣，通過(guò)Responses API，只需幾行代碼即可完成集成。

const productDocs = await openai.vectorStores.create({
    name: "Product Documentation",
    file_ids: [file1.id, file2.id, file3.id],
});

const response = await openai.responses.create({
    model: "gpt-4o-mini",
    tools: [{
        type: "file_search",
        vector_store_ids: [productDocs.id],
    }],
    input: "What is deep research by OpenAI?",
});
console.log(response.output_text);

文件搜索工具可用于多種現(xiàn)實(shí)世界的應(yīng)用場(chǎng)景，包括幫助客戶支持代理輕松訪問(wèn)常見(jiàn)問(wèn)題解答（FAQ）、協(xié)助法律助理快速參考過(guò)往案例以及幫助編碼代理查詢技術(shù)文檔。例如，Navan在其AI驅(qū)動(dòng)的旅行代理中使用文件搜索，能夠快速?gòu)闹R(shí)庫(kù)文章（如公司的旅行政策）中為用戶提供精確答案。憑借內(nèi)置的查詢優(yōu)化和重排功能，Navan無(wú)需額外調(diào)整或配置即可建立強(qiáng)大的檢索增強(qiáng)生成（RAG）管道。通過(guò)為每個(gè)用戶群體設(shè)置專用的向量存儲(chǔ)，Navan能夠根據(jù)個(gè)人賬戶設(shè)置和用戶角色定制答案，為客戶及其員工節(jié)省時(shí)間，同時(shí)提供準(zhǔn)確、個(gè)性化的支持。

該工具在Responses API中對(duì)所有開(kāi)發(fā)者開(kāi)放。使用費(fèi)用為每千次查詢2.50美元，文件存儲(chǔ)費(fèi)用為每GB每天0.10美元，首GB免費(fèi)。該工具繼續(xù)在Assistants API中提供。此外，OpenAI還在向量存儲(chǔ)API對(duì)象中添加了一個(gè)新的搜索端點(diǎn)，以便直接查詢數(shù)據(jù)以供其他應(yīng)用和API使用。開(kāi)發(fā)者可以在文檔中了解更多詳情，并在Playground中開(kāi)始測(cè)試。

（三）計(jì)算機(jī)使用

為了構(gòu)建能夠在計(jì)算機(jī)上完成任務(wù)的代理，開(kāi)發(fā)者現(xiàn)在可以使用Responses API中的計(jì)算機(jī)使用工具。該工具由與Operator相同的計(jì)算機(jī)使用代理（CUA）模型提供支持。這一研究預(yù)覽模型在OSWorld（用于完整計(jì)算機(jī)使用任務(wù)）上取得了38.1%的成功率，在WebArena上取得了58.1%的成功率，在WebVoyager（用于基于網(wǎng)絡(luò)的交互）上取得了87%的成功率，均創(chuàng)下了新的行業(yè)記錄。

內(nèi)置的計(jì)算機(jī)使用工具可以捕獲模型生成的鼠標(biāo)和鍵盤動(dòng)作，使開(kāi)發(fā)者能夠通過(guò)將這些動(dòng)作直接轉(zhuǎn)換為其環(huán)境中的可執(zhí)行命令來(lái)自動(dòng)化計(jì)算機(jī)任務(wù)。

const response = await openai.responses.create({
    model: "computer-use-preview",
    tools: [{
        type: "computer_use_preview",
        display_width: 1024,
        display_height: 768,
        environment: "browser",
    }],
    truncation: "auto",
    input: "I'm looking for a new camera. Help me find the best one.",
});
console.log(response.output);

例如，開(kāi)發(fā)者可以使用計(jì)算機(jī)使用工具自動(dòng)化基于瀏覽器的工作流程，如對(duì)Web應(yīng)用進(jìn)行質(zhì)量保證或在遺留系統(tǒng)中執(zhí)行數(shù)據(jù)輸入任務(wù)。例如，Unify是一個(gè)用于增加收入的行動(dòng)系統(tǒng)，它使用代理來(lái)識(shí)別意圖、研究賬戶并與買家互動(dòng)。通過(guò)使用OpenAI的計(jì)算機(jī)使用工具，Unify的代理可以訪問(wèn)以前無(wú)法通過(guò)API獲取的信息——例如，使物業(yè)管理公司能夠通過(guò)在線地圖驗(yàn)證企業(yè)是否擴(kuò)大了其房地產(chǎn)足跡。這種研究作為自定義信號(hào)，觸發(fā)個(gè)性化的推廣活動(dòng)——賦予上市團(tuán)隊(duì)以精準(zhǔn)和規(guī)模化的形式與買家互動(dòng)的能力。

另一個(gè)例子是Luminai，它將計(jì)算機(jī)使用工具整合到大型企業(yè)的復(fù)雜運(yùn)營(yíng)工作流中，這些企業(yè)通常缺乏API可用性和標(biāo)準(zhǔn)化數(shù)據(jù)。在與一家主要社區(qū)服務(wù)組織的最近試點(diǎn)中，Luminai僅用了幾天時(shí)間就自動(dòng)化了申請(qǐng)?zhí)幚砗陀脩糇?cè)流程——這是傳統(tǒng)機(jī)器人流程自動(dòng)化（RPA）在數(shù)月努力后仍難以實(shí)現(xiàn)的。

在去年推出Operator中的CUA之前，OpenAI進(jìn)行了廣泛的安全測(cè)試和紅隊(duì)測(cè)試，重點(diǎn)關(guān)注三個(gè)關(guān)鍵風(fēng)險(xiǎn)領(lǐng)域：濫用、模型錯(cuò)誤和前沿風(fēng)險(xiǎn)。為了應(yīng)對(duì)通過(guò)CUA在API中將Operator的能力擴(kuò)展到本地操作系統(tǒng)所帶來(lái)的風(fēng)險(xiǎn)，OpenAI進(jìn)行了額外的安全評(píng)估和紅隊(duì)測(cè)試。OpenAI還為開(kāi)發(fā)者增加了緩解措施，包括防止提示注入的安全檢查、敏感任務(wù)的確認(rèn)提示、幫助開(kāi)發(fā)者隔離其環(huán)境的工具以及增強(qiáng)對(duì)潛在政策違規(guī)行為的檢測(cè)。盡管這些緩解措施有助于降低風(fēng)險(xiǎn)，但該模型仍可能在非瀏覽器環(huán)境中出現(xiàn)意外錯(cuò)誤。例如，CUA在OSWorld（一個(gè)衡量AI代理在現(xiàn)實(shí)世界任務(wù)中表現(xiàn)的基準(zhǔn)測(cè)試）上的表現(xiàn)目前為38.1%，表明該模型尚未達(dá)到在操作系統(tǒng)上自動(dòng)化任務(wù)的高度可靠性。在這種情況下，建議進(jìn)行人工監(jiān)督。有關(guān)OpenAI針對(duì)API特定安全工作的更多細(xì)節(jié)，可以在更新的系統(tǒng)卡片中找到。

從今天起，計(jì)算機(jī)使用工具作為研究預(yù)覽在Responses API中向使用層級(jí)3-5的開(kāi)發(fā)者開(kāi)放。使用費(fèi)用為每百萬(wàn)輸入代幣3美元，每百萬(wàn)輸出代幣12美元。開(kāi)發(fā)者可以在文檔中了解更多詳情，并查看示例應(yīng)用，了解如何使用該工具進(jìn)行構(gòu)建。

四、智能代理開(kāi)發(fā)的利器：Agents SDK

除了構(gòu)建智能代理的核心邏輯并為其提供工具以使其有用之外，開(kāi)發(fā)者還需要編排智能代理的工作流。OpenAI新推出的開(kāi)源Agents SDK簡(jiǎn)化了多智能代理工作流的編排，并在去年發(fā)布的Swarm實(shí)驗(yàn)性SDK的基礎(chǔ)上進(jìn)行了顯著改進(jìn)。Swarm被開(kāi)發(fā)者社區(qū)廣泛采用，并成功部署在多個(gè)客戶項(xiàng)目中。

（一）Agents SDK的改進(jìn)

• 智能代理：易于配置的LLM，帶有清晰的指令和內(nèi)置工具。
• 交接：智能地在代理之間轉(zhuǎn)移控制權(quán)。
• 防護(hù)欄：可配置的安全檢查，用于輸入和輸出驗(yàn)證。
• 追蹤與可觀測(cè)性：可視化代理執(zhí)行軌跡，以便調(diào)試和優(yōu)化性能。

（二）Agents SDK的應(yīng)用場(chǎng)景

Agents SDK適用于多種現(xiàn)實(shí)世界的應(yīng)用場(chǎng)景，包括客戶支持自動(dòng)化、多步驟研究、內(nèi)容生成、代碼審查和銷售前景分析。例如，Coinbase使用Agents SDK快速原型化并部署了AgentKit，這是一個(gè)工具包，使AI代理能夠與加密錢包和各種鏈上活動(dòng)無(wú)縫互動(dòng)。在短短幾個(gè)小時(shí)內(nèi)，Coinbase將來(lái)自其開(kāi)發(fā)者平臺(tái)SDK的自定義動(dòng)作整合到一個(gè)功能齊全的代理中。AgentKit的精簡(jiǎn)架構(gòu)簡(jiǎn)化了添加新代理動(dòng)作的過(guò)程，讓開(kāi)發(fā)者能夠更多地專注于有意義的整合，而無(wú)需在復(fù)雜的代理設(shè)置中耗費(fèi)過(guò)多精力。

在短短幾天內(nèi)，Box能夠快速創(chuàng)建代理，利用網(wǎng)絡(luò)搜索和Agents SDK，使企業(yè)能夠搜索、查詢并從Box內(nèi)部存儲(chǔ)的非結(jié)構(gòu)化數(shù)據(jù)以及公共互聯(lián)網(wǎng)來(lái)源中提取見(jiàn)解。這種方法不僅讓客戶能夠訪問(wèn)最新信息，還能安全地搜索其內(nèi)部專有數(shù)據(jù)，同時(shí)遵守其內(nèi)部權(quán)限和安全策略。例如，金融服務(wù)公司可以構(gòu)建一個(gè)自定義代理，調(diào)用Box AI代理，將存儲(chǔ)在Box中的內(nèi)部市場(chǎng)分析與網(wǎng)絡(luò)上的實(shí)時(shí)新聞和經(jīng)濟(jì)數(shù)據(jù)相結(jié)合，為其分析師提供全面的投資決策視角。

Agents SDK與Responses API和Chat Completions API兼容。只要其他提供商的模型提供類似Chat Completions的API端點(diǎn)，SDK也可以與之配合使用。開(kāi)發(fā)者可以立即將其集成到他們的Python代碼庫(kù)中，Node.js支持也將很快推出。開(kāi)發(fā)者可以在文檔中了解更多詳情。

在設(shè)計(jì)Agents SDK時(shí)，OpenAI團(tuán)隊(duì)受到了社區(qū)其他優(yōu)秀作品的啟發(fā)，包括Pydantic、Griffe和MkDocs。OpenAI致力于將Agents SDK作為一個(gè)開(kāi)源框架繼續(xù)發(fā)展，以便社區(qū)能夠在此基礎(chǔ)上進(jìn)行擴(kuò)展。

（三）示例代碼

以下是一個(gè)簡(jiǎn)單的Python代碼示例，展示了如何使用Agents SDK構(gòu)建和運(yùn)行智能代理：

from agents import Agent, Runner, WebSearchTool, function_tool, guardrail

@function_tool
def submit_refund_request(item_id: str, reason: str):
    # Your refund logic goes here
    return "success"

support_agent = Agent(
    name="Support & Returns",
    instructinotallow="You are a support agent who can submit refunds [...]",
    tools=[submit_refund_request],
)

shopping_agent = Agent(
    name="Shopping Assistant",
    instructinotallow="You are a shopping assistant who can search the web [...]",
    tools=[WebSearchTool()],
)

triage_agent = Agent(
    name="Triage Agent",
    instructinotallow="Route the user to the correct agent.",
    handoffs=[shopping_agent, support_agent],
)

output = Runner.run_sync(
    starting_agent=triage_agent,
    input="What shoes might work best with my outfit so far?",
)
print(output)

五、展望未來(lái)：構(gòu)建智能代理平臺(tái)

OpenAI相信，智能代理將成為未來(lái)勞動(dòng)力的重要組成部分，顯著提升各行業(yè)的生產(chǎn)力。隨著公司越來(lái)越多地尋求利用AI完成復(fù)雜任務(wù)，OpenAI致力于提供構(gòu)建模塊，使開(kāi)發(fā)者和企業(yè)能夠有效創(chuàng)建能夠產(chǎn)生實(shí)際影響的自主系統(tǒng)。

通過(guò)今天的發(fā)布，OpenAI引入了首批構(gòu)建模塊，賦予開(kāi)發(fā)者和企業(yè)更輕松地構(gòu)建、部署和擴(kuò)展可靠、高性能的AI智能代理的能力。隨著模型能力越來(lái)越具有代理性，OpenAI將繼續(xù)投資于跨API的深度整合以及新工具的開(kāi)發(fā)，以幫助在生產(chǎn)環(huán)境中部署、評(píng)估和優(yōu)化智能代理。OpenAI的目標(biāo)是為開(kāi)發(fā)者提供一個(gè)無(wú)縫的平臺(tái)體驗(yàn)，用于構(gòu)建能夠幫助各行業(yè)完成各種任務(wù)的智能代理。OpenAI期待看到開(kāi)發(fā)者接下來(lái)構(gòu)建的成果。開(kāi)發(fā)者可以立即探索OpenAI的文檔，并關(guān)注即將發(fā)布的更多更新。

在這個(gè)充滿機(jī)遇的時(shí)代，OpenAI的這些新工具和API將為開(kāi)發(fā)者提供強(qiáng)大的支持，助力他們將創(chuàng)意轉(zhuǎn)化為現(xiàn)實(shí)，推動(dòng)AI技術(shù)在各個(gè)領(lǐng)域的廣泛應(yīng)用。讓我們拭目以待，看看這些智能代理將如何改變我們的未來(lái)！

本文轉(zhuǎn)載自公眾號(hào)Halo咯咯    作者：基咯咯

原文鏈接：??https://mp.weixin.qq.com/s/rOpvCY3opIkZ6F9LMH5M3w??