剛剛過去的Ignite 2023大會上，納德拉曾宣布Bing Chat全線更名Copilot，并表示：

Copilot無處不在。

今天，微軟再次推出Copilot一系列重磅級更新。

它將集成OpenAI最新模型GPT-4 Turbo、DALL-E 3、以及代碼解釋器（Code Interpreter）能力，并在未來幾周推出。

另外，必應還開始了AI「深度搜索」功能的內測，可以把簡單問題瞬間轉化為詳細的提示，不會prompt也不用怕了。

如此看來，你還有必要買ChatGPT Plus的會員嗎？網友做了一張對比圖。

Copilot年度升級，GPT-4 Turbo免費用

早在今年2月，微軟首次推出了直接對標ChatGPT的聊天機器人——Bing Chat。

這也就是，AI助手Copilot初次以這樣的方式誕生。

自此十個月左右的時間，GPT-4加持全新Copilot正式接入Office全家桶、Windows 11、Edge瀏覽器，以及Microsoft 365訂閱服務。

再到Ignite大會上，Bing Chat全線更名Copilot后，微軟宣布每個人都將有一個AI Copilot。

而現在，最令人振奮的是，OpenAI最新的GPT-4 Turbo模型，馬上也能在Copilot用上了。

128k超長上下文，意味著Copilot將擁有更強的理解查詢能力，處理更復雜、更長的任務。

另外，更新后DALL-E 3模型也將集成到Copilot中，能夠創建更高質量、更符合提示的圖像。

DALL-E 3模型的改進

所有的Edge用戶可以通過Copilot在網頁上輕松實現編寫。只需選擇要更改的文本，然后讓Copilot重寫即可。

前段時間，已經有網友在Reddit上發布了自己體驗這一新功能的效果。

你還可以使用Edge中的Copilot，匯總在YouTube上觀看的視頻。

多模態搜索（search grounding）能力也將推出。微軟將GPT-4的強大視覺能力，與必應圖像搜索和網絡搜索數據相結合，就可以實現更好的圖片搜索。

就比如，以前發送一張圖，模型只會給出描述。而search grounding能夠給出火箭的型號、發射的具體日期。

多模態搜索

Copilot也將得到code interpreter能力的加持。開發者便可以通過Copilot就能獲得更準確的計算、數據分析，甚至是代碼。

用戶還可以在Copilot上傳和下載文件，這樣就可以使用自己的數據和代碼，以及必應的搜索結果。

微軟表示，Copilot將編寫代碼來回答復雜的自然語言請求，在沙盒環境中運行該代碼，并使用結果為用戶提供更高質量的回復。

Copilot全新code interpreter功能

Copilot強大的Python環境在Azure Container應用程序之上構建的安全沙箱環境中運行。

它提供了快速、與用戶隔離的環境，并且預裝了許多流行的數據科學工具和庫，如 pandas、numpy、matplotlib、sklearn、flask 等，以解決復雜的問題。

你可以將Copilot從Bing搜索和網絡上獲得的數據，與上傳的文件中的數據結合起來，進而獲得深入相關的洞察，以及更好的交互式的輸出。

AI深度搜索，30秒解答更全面

在必應中，微軟也將推出全新功能「深度搜索」，完全是不會prompt用戶的福音。

「深度搜索」基于必應的網絡索引和排名系統之上，并得到了GPT-4的加持。

這樣，當你在在查詢問題時，「深度搜索」可以對提示進行擴展，進而讓搜索引擎能夠找到與問題相關的多個主題的答案。

不過，若想使用「深度搜索」這一功能，必須得有耐心。

一次「深度搜索」需要長達30秒的時間，而必應的常規搜索，可以在不到1秒時間內給出結果。

了解搜索意圖

舉個栗子，必應能夠將「日本積分系統如何運作」這樣模糊的提示，轉化為更加全面的提示描述：

解釋各種會員卡計劃在日本的運作方式，包括每種計劃的好處、要求和限制。舉例說明不同類別（例如便利店、超市和餐館）的流行會員卡。比較在日本使用會員卡和其他支付方式的優缺點，包括當前的獎勵和優惠。重點介紹最受歡迎的服務和參與商戶。

不過，有些查詢是模棱兩可的。

還拿上面的例子來看，「積分系統在日本如何運作」可以指獎勵積分，但也可以指有關移民政策或其他方面的信息

這時，「深度搜索」通過GPT-4來查找所有可能的意圖，將搜索范圍擴大到移民政策和公共交通票價的描述。

如果你的意圖被誤解了，你可以從下面的提示窗口中，選擇貼切的方向。

尋找更深層次的答案

必應會以這項任務為中心，對網絡進行更深入的搜索，并拉回通常不會出現在典型搜索結果中的相關結果。

深度搜索結合使用了多種查詢技術，以查找可能與用戶擴展查詢相匹配的網頁，代表用戶改寫查詢，并搜索重寫后的查詢。

比如，對于「積分查詢」，「深度搜索」可能還會嘗試搜索：

- 日本會員卡計劃 

- 日本最適合旅行者的會員卡 

- 按類別對日本忠誠度計劃比較 

- 在日本兌換會員卡 

- 使用手機應用管理忠誠度積分

這樣一來，「深度搜索」可以找到涵蓋查詢不同方面的結果，即使這些結果沒有明確包含原始關鍵詞。

在必應上進行常規搜索時，每次搜索都要涉及數百萬個網頁，而「深度搜索」的搜索結果要比常規搜索排名靠前的結果多10倍，信息量更大、更具體。

搜索結果排序

可以看到，必應搜索到的任何主題，都將顯示在搜索結果的面板中。

然后，你可以選擇最適合自己要查找的內容，「深度搜索」將通過與綜合描述的匹配程度，對搜索結果進行排序。

「深度搜索」通過各種信號來確定每個結果的相關性和質量，同時考慮主題匹配程度、是否達到了適當的詳細程度、來源的可信度和可信度、新鮮度和流行度等。

微軟在官方博客中表示，「深度搜索」適合對于有復雜問題并且不滿足于簡單答案的用戶而設計，是一個可選項。

視頻理解和問答

另外，你還可以在Edge瀏覽器上還可以對正在觀看的視頻進行總結或提問。

比如，讓Copilot幫忙總結一下納德拉最新的Ignite主題演講視頻。

或者是老黃在Computex 2023的演講。

可以看到，Copilot給出的關鍵點還是相當準確的——在視頻25分鐘的時候，老黃發布了全新的定制AI模型服務Avatar Cloud Engine (ACE) 。

目前，這個功能已經正式上線，有興趣的讀者可以去嘗試嘗試～