谷歌和OpenAI又杠上了。

在新版GPT-4o剛登頂競技榜后1天，立馬發(fā)布最新試驗(yàn)版模型Gemini-Exp-1121奪回冠軍寶座。

圖片

要知道，一周前上一版模型Gemini-Exp-1114才發(fā)布。

這怕不是拿準(zhǔn)了OpenAI會來爭擂臺，故意留了一手。

這就是引誘OpenAI發(fā)新版GPT-4o，然后再用更好的模型來狙擊它。

圖片

谷歌的研究人員們顯然很得意。

谷歌DeepMind首席科學(xué)家Jack Rae，稱這是一場有趣的后訓(xùn)練“閃電戰(zhàn)”。暗示post-training的迭代速度要比預(yù)訓(xùn)練快得多。

圖片

DeepMind研究副總裁Oriol Vinyals還隔空發(fā)問奧特曼：最近還有提交計(jì)劃嗎？

圖片

火藥味很足，也很自信啊。

所以“1121”有多強(qiáng)？來看具體性能。

代碼/推理/視覺理解全提升

按照官方說法，Gemni-Exp-1121重點(diǎn)提升了三方面性能。

• 代碼能力顯著提升
• 更強(qiáng)推理能力
• 更強(qiáng)視覺理解能力

圖片

除了風(fēng)格控制外，其他方面目前都位于第一。

圖片

在視覺能力方面，Gemini-Exp-1121比上一版還有提升。

圖片

風(fēng)格控制下的復(fù)雜提示詞方面，Gemini-Exp-1121和o1-preview、New Sonnet 3.5水平相當(dāng)。

圖片

競技場中的實(shí)際勝率如下。

圖片

現(xiàn)在也能直接上手體驗(yàn)。

比如針對同一張漫畫，讓Gemini-Exp-1121和GPT-4o-lastest-1120給出理解。

圖片

Gemini-Exp-1121的回答更加全面且詳細(xì)，并且善用小標(biāo)題、重點(diǎn)加粗。

圖片

新版4o的回復(fù)就比較簡短和籠統(tǒng)。

圖片

在經(jīng)典的動物過河邏輯推理題上，Gemini-Exp-1121回答完全正確，新版4o出現(xiàn)了一些失誤，把第三次過河和第四次過河合并了，因此回答有誤。

問題：農(nóng)夫需要把狼、羊和白菜都帶過河，但每次只能帶一樣物品，而且狼和羊不能單獨(dú)相處，羊和白菜也不能單獨(dú)相處，問農(nóng)夫該如何過河。

圖片

One More Thing

值得一提的是，OpenAI這邊也有新消息。

有人在ChatGPT最新測試版本中首次發(fā)現(xiàn)了“實(shí)時攝像”（Live Camera）視頻功能的代碼。

圖片

它具體包括實(shí)時錄像、實(shí)時處理、語音模式集成以及視覺識別能力。

在高級語音模式推出時，一些用戶有體驗(yàn)到這一能力。

圖片

這意味著OpenAI已經(jīng)做好了上線這一功能的準(zhǔn)備。

另一邊谷歌也演示過類似的demo，還沒上線。按照OpenAI的調(diào)性，很可能會搶在谷歌前全量鋪開。

圖片

或許等到明年，和Chatbot的主要交流方式，就要從文字對話轉(zhuǎn)為語音和agent了。Live Camera可能就是開始，你覺得呢？

圖片

參考鏈接：
[1]https://x.com/OfficialLoganK/status/1859667244688736419
[2]https://x.com/adonis_singh/status/1859682100569571399
[3]https://x.com/OriolVinyalsML/status/1859730969600852222
[4]https://x.com/rowancheung/status/1859301345993556277