精品欧美一区二区三区在线观看 _久久久久国色av免费观看性色_国产精品久久在线观看_亚洲第一综合网站_91精品又粗又猛又爽_小泽玛利亚一区二区免费_91亚洲精品国偷拍自产在线观看 _久久精品视频在线播放_美女精品久久久_欧美日韩国产成人在线

快慢思考不用二選一!華為開源7B模型實現自由切,精度不變思維鏈減近50%

人工智能 新聞
openPangu-Embedded-7B-v1.1,通過漸進式微調策略和獨特的快慢思考自適應模式,既支持手動切換“快思考”或“慢思考”模式,也能根據問題難度自動在兩種思維模式間無縫轉換。

國產自研開源模型,讓模型不用在快思考和慢思考間二選一了!

華為最新發布openPangu-Embedded-7B-v1.1,參數只有7B,卻身懷雙重“思維引擎”。

要知道,長期以來,大模型快思考與慢思考模式不可兼得,這成為業界的一大痛點。在當前大模型混戰中,各家巨頭都在尋求破局之道,但此前開源領域一直缺乏一款可自由切換快慢思維模式的模型。

要快,還是要慢?AI在面對不同難度的問題時也有“選擇困難癥”。

而現在,openPangu-Embedded-7B-v1.1,通過漸進式微調策略和獨特的快慢思考自適應模式,既支持手動切換“快思考”或“慢思考”模式,也能根據問題難度自動在兩種思維模式間無縫轉換。

簡單問題它秒答如飛,復雜任務它深思熟慮,一舉填補了開源大模型在這一能力上的空白,讓效率與準確率實現雙贏。

在通用、數學、代碼等多個權威評測中,該模型精度相較于此前模型大幅提升,且引入模式自動切換并沒有犧牲精度。在CMMLU等基準中,openPangu-Embedded-7B-v1.1保持精度的同時,平均思維鏈長度縮短近50%。

模型現已在GitCode開源。

所以,openPangu-Embedded-7B-v1.1究竟是如何做到的?華為盤古團隊在模型訓練策略上又有哪些創新?

漸進式微調策略:像人一樣“進階”學習

眾所周知,大模型往往需要海量訓練才能具備強大的推理能力。然而,openPangu團隊并未采取一味“填鴨式”的訓練方式,而是采用了一種漸進式微調(SFT,Iterative Distillation)策略,模擬人類逐步進階的學習過程。

通過精心設計的迭代訓練,讓模型在每一步都處于“適度挑戰”的學習區間,能力穩步提升。

具體來說,團隊將漸進式微調劃分為三個循序漸進的階段,每一步都讓模型獲得針對性的提升:

第一步:合理選題,保持適度挑戰

在每一輪訓練迭代中,模型會根據自身當前能力對候選訓練樣本進行難度評分,優先挑選難度適中、不偏易也不偏難的題目來訓練。這樣確保模型始終在與能力相匹配的挑戰中學習,既不會因過于簡單停滯不前,也不會因過難而無法收獲,步步為營拓展能力邊界。

第二步:歸納總結,穩固已有知識

完成一輪訓練后,產生的多個模型版本(不同檢查點)不會簡單取舍,而是通過參數增量融合(inter-iteration merging)合并成統一的模型。這一步相當于將新學到的知識與原有能力進行“匯總融合”,讓模型的認知更加穩固,避免遺忘過去學到的本領。

第三步:持續提升,擴展能力邊界

隨著上述循環不斷進行,模型積累的知識與技能越來越豐富,自身能力水漲船高,能夠勝任更復雜的數據訓練。這時,它進入了更高水平的“拉伸區”,可以挑戰此前無法解答的難題。模型能力的提升又反過來推動下一輪更高難度的數據選擇,形成一個不斷進化的良性循環。

通過這樣的漸進式訓練方式,openPangu-Embedded-7B-v1.1不再是被動接受知識的“填鴨式”學習者,而是化身為一個能夠持續進化的學習者。實驗結果表明,這一策略讓模型的推理過程更加穩定,泛化表現更加強勁。

快慢自適應機制:兩階段課程,從“手動擋”進階“自動擋”

相比之前開源的openPangu-Embedded-7B-v1,此次開源的openPangu-Embedded-7B-v1.1模型最大的亮點,就是引入了獨特的快慢思考自適應模式,使得模型可以自動根據任務難度選擇使用快思考還是慢思考進行解答。

相比4月先行披露的技術報告,團隊的快慢思考切換訓練方案進行了大幅升級,不但從方案上演進為了數據質量驅動的學習策略,快慢思考切換的范圍也從數學任務擴展到了一般任務。

第一階段:教會模型區分快慢。

在這個“低難度課程”階段,研究團隊首先通過數據構造,讓模型明確什么是“快思考”、什么是“慢思考”。

他們精心構建了一個混合訓練數據集:在用戶提問(Prompt)中附加特殊的標識符,直接告訴模型該用快思考還是慢思考來回答。通過在這個帶有明確指示信號的數據上訓練,模型學會將特定輸入模式與對應的思維方式、回答風格建立關聯。

可以說,這一步猶如給模型裝上“手動變速箱”,明確劃定了兩種思考模式的界限,是一堂扎實的“熱身課”,確保模型具備基本的快慢思維切換意識。

第二階段:自主學會切換。

當模型已經掌握了顯式控制的本領后,就進入更具挑戰性的“進階課程”。這一階段不再提供外部快/慢提示,而是要求模型根據問題本身自行判斷何時該快、何時該慢。

從簡單樣本過渡到復雜樣本,團隊設計了一套數據質量驅動的自優化訓練策略:先用第一階段訓練好的模型作為“教練”,為同一問題生成多樣化的解答鏈路,然后從中挑選質量最高的解答,再以這些優質解答來有選擇地微調模型。

通過這種“從優錄取”的訓練方式,模型逐漸學會了從復雜問題中自主推斷最優思考路徑,無需明確指令就能自動在快/慢模式間切換。可以說,這一步為模型裝上了智能“自動變速箱”——它告別了對外部指令的依賴,實現了內在驅動的決策。這一階段的訓練難度顯著高于第一階段,因為模型需要領悟更深層的隱含邏輯,而不再是簡單遵循提示符號。

經過兩個階段環環相扣的“課程學習”,openPangu-Embedded-7B-v1.1完成了從外部信號驅動的顯式切換到內部能力驅動的隱式切換的蛻變,大幅提升了模型在復雜推理任務中的靈活性與自主性。

最終,經過這一套訓練流程,新模型成功解鎖了快慢思考模式的雙模式切換——既支持用戶手動指定思考模式,也能在無需人為干預下自動選擇最合適的推理方式。

快慢自適應減少簡單任務Token量三到五成

如此復雜的訓練設計,最終效果如何?openPangu-Embedded-7B-v1.1在多個權威評測上交出了令人欣喜的答卷。

首先是精度的大幅提升。相較前代模型v1版本,新模型在通用、數學、代碼等各類數據集上全面超越了自己過去的成績。其中在最棘手的數學難題數據集(如AIME挑戰)上,v1.1版本取得了遠超v1的領先表現。

更難得的是,在采用自適應快慢思考模式下,新模型在復雜任務上的準確率依然保持與純“慢思考”情況下幾乎相同的水準,即引入自動切換并沒有犧牲精度。

其次在響應效率上,成果同樣令人眼前一亮。對于簡單問題,openPangu-Embedded-7B-v1.1能夠自動切換為快思考模式,大幅縮短不必要的冗長推理過程。

在某些基準測試中(例如中文綜合知識測試集CMMLU),新模型在保持精度基本不變的前提下,將平均輸出的思維鏈長度減少了近50%!也就是說,同一道簡單題,它給出的解釋步驟幾乎縮短了一半,直接帶來響應效率的翻倍提升。

與此同時,對于諸如AIME、LiveCodeBench這類復雜度極高的難題,模型依然會老老實實“慢思考”、給出詳盡的逐步推理,從而確保精度與只用慢思考模型相當。簡單題不啰嗦、難題不放棄,這種智能切換讓模型在速度和精度之間取得了很好的平衡。

邊緣AI部署利器:1B小模型性能拉滿

值得驚喜的是,openPangu系列近期不僅升級了7B模型,還推出了一款專為邊緣AI部署優化的輕量級模型——openPangu-Embedded-1B。

顧名思義,它只有十億參數,但卻通過多項技術加持,實現了“小體量也有大能量”。

在軟硬件協同設計方面,openPangu-Embedded-1B針對華為昇騰端側AI硬件進行了架構優化,充分利用芯片特性,大幅降低推理延遲、提升資源利用率。

與此同時,華為團隊采用多階段訓練策略(包括從零開始的預訓練、多樣化數據的課程式微調、離線同策略知識蒸餾以及多源獎勵的強化學習等),全面挖掘模型潛力,顯著增強了模型在各類任務上的表現。

得益于以上創新,這款僅10億參數的小模型取得了性能與效率的高度協同,在多個權威評測中成績亮眼。

據公開數據顯示,openPangu-Embedded-1B創下了國內1B級模型的新標桿,其整體平均成績不僅全面領先其他同規模模型,甚至追平了更大參數模型Qwen3-1.7B的水平。

這充分體現了出色的參數級性能比:用更小的模型實現了媲美大模型的效果,為國產自研大模型在資源受限場景下的探索提供了新的方向。

綜上,華為 openPangu-Embedded-7B-v1.1 的發布為當前熱度較高的大模型領域帶來了不一樣的思路。作為參數規模為 7B 的輕量級模型,它通過漸進式微調和雙階段訓練方法,實現了快慢思考模式的自由切換,在效率與精度之間找到了較好的平衡點。

無論是面向邊緣部署需求的小模型,還是追求復雜推理能力的通用模型,盤古系列的持續演進都展現出國產大模型的創新活力。

未來,這一具備“快慢思考”特性的模型,有望在更多實際應用場景中發揮價值。

項目已在GitCode開源:https://gitcode.com/ascend-tribe/openpangu-embedded-7b-v1.1

責任編輯:張燕妮 來源: 量子位
相關推薦

2025-08-01 14:32:35

AI模型訓練

2025-04-03 09:23:08

大模型強化學習開源

2025-03-20 08:34:14

2024-08-13 15:40:00

2024-03-25 08:00:00

2024-06-03 10:43:34

2025-02-12 09:00:00

AI模型DeepSeek

2024-07-17 13:40:01

2024-07-22 09:00:00

2024-02-07 12:39:00

AI數據

2024-04-03 12:32:00

數據訓練

2024-02-22 10:09:00

開源模型

2024-11-29 14:00:00

模型訓練

2024-09-05 14:25:00

訓練代碼

2024-02-04 08:00:00

Zephyr 7B大語言模型算法

2025-06-18 08:47:00

2025-02-10 14:30:00

模型數據開源

2024-03-25 00:05:00

開源模型AI

2024-04-02 09:17:50

AI數據開源
點贊
收藏

51CTO技術棧公眾號

日韩子在线观看| 中文字幕一区二区免费| 国产在线播放精品| 日韩av电影免费观看高清完整版| 亚洲网站在线播放| 6080国产精品| 中老年在线免费视频| 国产精品久久久99| 精品久久久久久一区二区里番| 日本污视频网站| 欧州一区二区三区| 中文字幕视频一区二区三区久| 91免费观看网站| 一级片中文字幕| 91精品国产91久久久久久黑人| 精品国产污污免费网站入口 | 在线不卡欧美精品一区二区三区| 欧妇女乱妇女乱视频| 国产在线视频网| 成人国产精品视频| 国产主播精品在线| 中文字幕黄色片| 国产亚洲成av人片在线观黄桃| 欧美中文字幕一区二区三区| 无码粉嫩虎白一线天在线观看| 国产乱码精品一区二区三区精东| 国产欧美高清| 中文字幕在线官网| 国产亚洲欧美一区在线观看| 99久久99久久精品国产片| 国产男人搡女人免费视频| 亚洲午夜极品| 欧美二区乱c黑人| 日韩欧美视频免费观看| 亚瑟一区二区三区四区| 欧美日韩国产区| 91看片淫黄大片91| 免费网站免费进入在线| 国产欧美精品国产国产专区| 精品999在线观看| 国产高清视频免费观看| 精品一区二区免费看| 国产成人精品综合| 日韩综合在线观看| 久久激情一区| 伊人一区二区三区久久精品| 日本新janpanese乱熟| 大桥未久在线视频| 亚洲va韩国va欧美va精品| 免费cad大片在线观看| 高清全集视频免费在线| 久久青青草原亚洲av无码麻豆| 国产调教一区二区三区| 亚洲男人av电影| 免费毛片视频网站| 精品美女久久久| 国产一区二区三区四区福利| 国产精品无码久久久久一区二区| 亚洲第一福利社区| 在线视频一区二区三区| 能在线观看的av| av二区在线| 国产欧美日韩三级| 亚洲精品在线观看免费| 日韩免费网站| 亚洲免费观看高清完整版在线观看 | 欧美gay视频| 色婷婷精品大在线视频| 天堂√在线观看一区二区| 免费特级黄色片| 精品久久久久成人码免费动漫| 激情文学综合插| 91精品天堂| 黄色一级片免费在线观看| 日韩一级网站| 国产成人精品在线播放| 一道本在线视频| 国产成人高清视频| 久久精品magnetxturnbtih| 中文字幕人妻一区二区在线视频| 蜜臀av一区二区| 91亚洲精品一区| 人妻视频一区二区三区| 91亚洲大成网污www| 色一情一乱一伦一区二区三区丨| 精品自拍一区| 亚洲成年人影院| 亚洲高清在线免费观看| 青草伊人久久| 亚洲片在线观看| 永久免费看mv网站入口| 亚洲韩日在线| 国产欧美一区二区三区在线| 亚洲成人一级片| 久久久国际精品| 日本aa在线观看| 欧美色999| 日韩欧美一区二区在线视频| 三年中国国语在线播放免费| 日韩在线电影| 亚洲毛片在线免费观看| 国产免费久久久久| 亚洲在线免费| 亚洲影院色在线观看免费| 天天操天天操天天| 亚洲欧洲成人自拍| 日本黄色三级大片| 国产福利片在线观看| 欧美成人家庭影院| 亚洲在线观看免费视频| 国产免费999| 久久综合五月婷婷| 久久精品视频va| 五月婷婷激情视频| 成人久久18免费网站麻豆| 亚洲欧美日韩国产yyy| 岛国av在线网站| 欧美一区二区视频观看视频| 午夜理伦三级做爰电影| 国精品一区二区| 国产欧美精品久久久| 日本又骚又刺激的视频在线观看| 亚洲乱码中文字幕| 亚洲黄色小视频在线观看| 日本午夜精品久久久| 欧美丰满少妇xxxxx| 在线免费观看av片| 国产三级久久久| 哪个网站能看毛片| 精品三级av在线导航| 欧美激情视频一区| av中文字幕免费在线观看| 国产精品久久久久久妇女6080| 久久国产亚洲精品无码| 欧美激情影院| 久久久噜噜噜久久中文字免| 99久久精品免费看国产交换| 国产精品国产三级国产专播品爱网| av天堂永久资源网| 日韩精品免费一区二区三区竹菊| 欧美福利视频网站| 午夜精品久久久久久久96蜜桃 | 久久久久久久久久久网| 自拍视频亚洲| 国产噜噜噜噜噜久久久久久久久| 麻豆国产在线播放| 国产精品电影一区二区三区| 日本精品www| 国产精品入口久久| 日韩免费观看网站| 成人资源www网在线最新版| 色偷偷88欧美精品久久久| 麻豆国产精品一区| 香蕉精品999视频一区二区 | 午夜免费视频网站| 欧美黄色aaaa| 日本亚洲精品在线观看| 亚洲天堂国产视频| 精品久久久久成人码免费动漫| 欧美国产精品中文字幕| 亚洲 欧美 另类人妖| 日韩av片子| 成人h视频在线观看播放| 免费**毛片在线| 日韩一区二区中文字幕| av免费观看不卡| 在线日韩视频| 麻豆久久久9性大片| 蜜臀国产一区| xx视频.9999.com| av中文在线播放| 91理论电影在线观看| 波多野结衣作品集| 国产精品精品国产一区二区| 91手机在线观看| 手机在线观看av网站| 欧美日韩国产首页| 亚洲色偷偷综合亚洲av伊人| 国产一区91精品张津瑜| 成年人网站国产| 教室别恋欧美无删减版| 国产日韩欧美在线播放| 日本片在线观看| 亚洲久久久久久久久久| 亚洲一卡二卡在线| 偷拍亚洲欧洲综合| 很污很黄的网站| www.日韩精品| 大荫蒂性生交片| 欧美人妖在线| 成人av播放| 成人18视频在线观看| 欧美俄罗斯乱妇| 成年人视频网站在线| 日韩欧美黄色影院| 欧美另类高清videos的特点| 亚洲精品一二三| 无码人妻精品一区二区中文| 国产精品亚洲成人| 99精品一区二区三区的区别| 欧美成人精品一区二区男人小说| 中文字幕免费精品一区高清| 久久黄色精品视频| 国产精品国产馆在线真实露脸| 黑人玩弄人妻一区二区三区| 日日夜夜精品视频免费| 欧美国产视频一区| 日韩激情一区| 久久久久久久久久久久久9999| 欧美成人三级| 亲子乱一区二区三区电影| 国产精品专区在线| 精品999在线观看| 欧美日韩国产在线看| 免费视频91蜜桃| 成人一级视频在线观看| 九色porny自拍| 国产精品久久久久久模特| 免费的av在线| 色777狠狠狠综合伊人| 久久精品人人做人人爽电影| 日本亚洲视频| 91精品久久久久久久久久久久久| 中文在线а√在线8| 欧美多人爱爱视频网站| 老司机午夜在线| 国产一区二区动漫| 日本韩国一区| 亚洲第一区在线观看| 99国产在线播放| 欧美精品久久久久久久多人混战| 中文字幕永久在线| 成人爱爱电影网址| www.污污视频| 蜜乳av一区二区| 精品少妇无遮挡毛片| 久久精品综合| 激情五月亚洲色图| 久久久蜜桃一区二区人| 噜噜噜久久亚洲精品国产品麻豆| 亚洲二区精品| 成人一对一视频| 国产精品亚洲产品| 青青艹视频在线| 亚洲女同在线| 国产一区亚洲二区三区| 香蕉久久久久久久av网站| 国产男女无遮挡| 蜜乳av另类精品一区二区| 男人操女人免费软件| 国产一区二区精品| 成人久久久久久久久| 水蜜桃久久夜色精品一区的特点 | 欧美精品电影免费在线观看| 九七电影韩国女主播在线观看| 久久精品国产亚洲| 男人天堂手机在线| 久久午夜a级毛片| 午夜在线激情影院| 国内精品久久久久久| a级片免费在线观看| 91国内在线视频| 欧美性xxx| 91精品久久久久久久久久另类| 青青久久精品| 国产91一区二区三区| 林ゆな中文字幕一区二区| 久久久国产精品一区二区三区| 精品在线观看入口| 亚洲一区二区在线观| 欧美精品一卡| 国产一区91精品张津瑜| 国产精品专区在线| 日韩中文字幕区一区有砖一区| 蜜臀av免费观看| 国产99久久精品| 91成人破解版| **欧美大码日韩| 精品在线播放视频| 精品视频在线免费观看| 精品国产av 无码一区二区三区| 精品国产伦一区二区三区观看方式 | 国产精品一区2区| 制服丝袜第一页在线观看| 久久久欧美精品sm网站| 日韩国产第一页| 疯狂做受xxxx欧美肥白少妇| 最好看的日本字幕mv视频大全| 欧美精品日韩精品| 四虎国产精品永远| 久久亚洲精品国产亚洲老地址| aa国产成人| 成人性生交大片免费观看嘿嘿视频| 粉嫩精品导航导航| 视频一区二区三区在线观看| 欧美久久99| 国产wwwxx| 成人国产电影网| 国产精品国产三级国产传播| 欧美视频精品一区| 99热这里只有精品99| 亚洲图片在区色| free性欧美| 亚洲一区二区免费在线| 奇米狠狠一区二区三区| 91传媒免费视频| 男人操女人的视频在线观看欧美| 人妻互换一二三区激情视频| 欧美韩日一区二区三区| 日韩欧美高清在线观看| 日韩一区二区三区视频在线观看| 欧美女优在线| 性欧美在线看片a免费观看| 白嫩亚洲一区二区三区| 视频一区二区在线| 久久一区二区三区四区五区 | 伊人成色综合网| 国产精一品亚洲二区在线视频| 人人爽人人爽人人片| 福利一区福利二区微拍刺激| 亚洲va欧美va| 日韩在线资源网| 亚洲成人一区在线观看| 国产精品福利久久久| 国产日韩三级| 国产美女在线一区| 国产美女av一区二区三区| 四虎影视1304t| 欧美日韩专区在线| 黄色在线免费观看大全| 538国产精品一区二区免费视频| 18国产精品| 欧美视频一区二区| 亚洲中文一区二区三区| 亚洲欧美精品伊人久久| 最近高清中文在线字幕在线观看1| 成人欧美一区二区三区黑人免费| 五月激情久久久| 日韩精品视频一二三| 国产欧美精品一区二区三区四区| 99久久久久久久久| 一区二区欧美久久| www.一区| 特级黄色录像片| 国产成人精品免费看| 久久久久无码国产精品| 日韩欧美视频在线| 性欧美高清come| 国产精品v欧美精品v日韩| 国产一区日韩欧美| 欧美久久久久久久久久久| 亚洲国产视频网站| 污视频在线免费| 国产99视频在线观看| 精品久久91| 91 视频免费观看| 亚洲综合色噜噜狠狠| 动漫av一区二区三区| 亚洲欧美日韩中文视频| 中文字幕人成乱码在线观看| 久久爱av电影| 日韩主播视频在线| 国产又色又爽又高潮免费| 91精品国产一区二区| 国内高清免费在线视频| 久久精品国产第一区二区三区最新章节 | 色喇叭免费久久综合| www.这里只有精品| 亚洲美女偷拍久久| 日韩中文字幕免费观看| 欧美亚洲在线视频| 久久国产中文字幕| 古装做爰无遮挡三级聊斋艳谭| 亚洲国产中文字幕在线视频综合| 色综合成人av| 国产一区二中文字幕在线看| 国产精品黄色| 日本xxxxxxxxx18| 欧美一级艳片视频免费观看| 多野结衣av一区| 亚洲欧洲在线一区| 国产成人精品在线看| 日韩不卡在线播放| 中文字幕视频在线免费欧美日韩综合在线看 | 国产一级在线| 成人h片在线播放免费网站| 激情久久中文字幕| 久久亚洲无码视频| 日韩免费成人网| 日韩在线观看不卡| 99久久免费观看| 欧美激情一区二区三区全黄| 亚洲成a人片77777精品| 国产精品久久9| 亚洲久久在线| 三级全黄做爰视频| 亚洲美女性视频| 97青娱国产盛宴精品视频| 中文久久久久久| 亚洲一区在线电影|