精品欧美一区二区三区在线观看 _久久久久国色av免费观看性色_国产精品久久在线观看_亚洲第一综合网站_91精品又粗又猛又爽_小泽玛利亚一区二区免费_91亚洲精品国偷拍自产在线观看 _久久精品视频在线播放_美女精品久久久_欧美日韩国产成人在线

逆向工程:ChatGPT 的記憶是如何工作的

人工智能 新聞
文章深度剖析了“用戶洞察”(User Insights)高級記憶系統,分析了ChatGPT如何從你的多輪對話中自動學習、總結你的專業背景(如對Rust編程的深入理解)、知識領域乃至溝通偏好,并附上置信度和時間范圍,悄然注入后續對話的上下文中。

圖片

這篇文章是名為eric 工程師對ChatGPT記憶系統的深度逆向工程和技術實現推測。它詳細拆解了“可保存記憶”和包含“當前會話歷史”、“對話歷史”、“用戶洞察”三個子系統的“聊天歷史”,分析了它們的工作原理、可能的實現方案(如向量數據庫、聚類算法),并探討了這些記憶系統如何顯著提升ChatGPT的用戶體驗,認為“用戶洞察”是體驗提升的關鍵。

文章深度剖析了“用戶洞察”(User Insights)高級記憶系統,分析了ChatGPT如何從你的多輪對話中自動學習、總結你的專業背景(如對Rust編程的深入理解)、知識領域乃至溝通偏好,并附上置信度和時間范圍,悄然注入后續對話的上下文中。這正是ChatGPT能提供“千人千面”且高度相關回復的核心秘密。

地址:https://macro.com/app/md/54115a42-3409-4f5b-9120-f144d3ecd23a

原文很長,這里做一個重點梳理。

ChatGPT的記憶系統:不止一種,而是一套組合拳

Eric發現,ChatGPT的記憶并非單一系統,而是主要由兩大部分構成:“可保存記憶(Saved Memory)”和“聊天歷史(Chat History)”。

可保存記憶 (Saved Memory)

這個比較好理解,就是用戶可以主動控制、讓ChatGPT記住一些關于你的事實。比如你可以明確告訴它:“記住,我喜歡簡潔的技術解釋”,或者“記住,我是個素食主義者”。這些信息會被ChatGPT存起來,并在后續對話中作為背景知識(注入系統提示)使用。用戶還可以通過一個簡單的界面查看和刪除這些記憶條目。

有趣的是,這個系統在去重和矛盾檢測方面做得比較“粗放”,即使是高度相關的信息,也可能作為獨立的記憶條目共存。

聊天歷史 (Chat History):復雜且強大的“幕后功臣”

這部分就厲害了。雖然名字叫“聊天歷史”,但Eric通過實驗發現,它實際上可能包含了三個子系統,并且是提升助手響應質量的主要功臣。

當前會話歷史 (Current Session History): 這部分記錄了用戶在其他對話中最近發送的少量消息(比如過去一天內,少于10條)。這使得ChatGPT能捕捉到你最近的一些零散想法或上下文,盡管Eric表示在實際使用中不太容易察覺到這個系統的作用。

對話歷史 (Conversation History): 這是真正的“聊天記錄”精華。ChatGPT能夠從過去的對話中提取相關上下文,甚至能直接引用你在其他對話中發送過的消息!實驗表明,它能準確引用長達兩周前的消息。超過兩周后,雖然不能精確引用,但也能提供消息的摘要。這暗示著消息檢索系統同時基于對話摘要和消息內容進行索引。不過,ChatGPT自身的回復,引用準確性似乎要差一些,要么是沒存,要么是存得更粗略。

用戶洞察 (User Insights): 這才是重量級選手,堪稱“可保存記憶”的自動化、高級版。根據Eric“套”出來的ChatGPT上下文信息,這些洞察是這樣的格式:

> “用戶在Rust編程方面擁有豐富的經驗和知識,尤其是在異步操作、線程和流處理方面”
> “用戶在2024年底至2025年初的幾次對話中,多次詢問關于Rust編程的詳細問題,包括異步行為、trait對象、serde實現和自定義錯誤處理”
> “置信度=高”

看到沒?這些洞察是跨多個對話生成的,還帶有時間范圍和置信度!置信度可能代表了用于生成該洞察的消息向量的相似度或數量。這些洞察的生成,顯然依賴于一個比兩周直接引用窗口更大的數據集。

技術實現猜想:向量數據庫、聚類與LLM的巧妙配合

Eric作為工程師,自然會思考這些功能背后可能的技術實現。

可保存記憶: 可能通過一個類似“bio”工具的函數實現。用戶說“記住XX”,就調用這個工具,LLM將用戶消息轉化為事實列表,進行簡單的檢查后存入數據庫。這些事實隨后會被注入到系統提示中。

當前會話歷史: 實現起來相對簡單,可能就是對聊天消息表按時間篩選用戶最近的消息。

對話歷史: 這部分就復雜了。Eric推測使用了向量數據庫。消息被嵌入(embedding)后存入,一個庫按消息內容索引,另一個按對話摘要索引。當用戶發送新消息時,系統會查詢這兩個向量空間,找出兩周內的相似內容。對于更早的對話,則可能查詢一個存儲了對話摘要和消息摘要的第三個向量空間。

用戶洞察: 這是最復雜也最核心的部分。Eric認為這可能是一個批處理任務,比如每周運行一次的定時任務(cron job):

找出過去一周活躍的用戶。
對每個用戶運行一個“洞察更新”程序。
這個程序的核心可能是對用戶的消息歷史(嵌入表示)進行**聚類分析**(比如k-NN算法),目標是找到一些有意義的消息簇。
然后,將每個簇內的消息文本喂給一個LLM,用特定提示詞(prompt)讓LLM生成洞察摘要,并附上時間戳和置信度。
最后,這些洞察被存起來,并在用戶與ChatGPT對話時加載到上下文中。

為什么ChatGPT用起來那么爽?

通過ChatGPT平臺使用模型,體驗遠超直接調用API,這幾乎是共識。除了提示工程的優化,記憶系統絕對是幕后功臣。

可保存記憶最直接,用戶主動定制,讓ChatGPT更“合身”。缺點是,不那么懂技術的用戶可能不知道怎么用。

用戶洞察彌補了這個不足。它自動學習用戶的偏好和知識背景(比如Eric的洞察顯示他懂Rust,喜歡技術性解釋),從而讓ChatGPT的回答更符合用戶的“胃口”,避免雞同鴨講,減少溝通成本。Eric甚至認為,用戶洞察系統貢獻了80%以上的體驗提升!

當前會話歷史理論上能讓新對話更快進入狀態,但實際感知不強。

對話歷史則賦予了ChatGPT一種“人類對話者”應有的上下文感知能力,避免重復和矛盾。

責任編輯:張燕妮 來源: AI寒武紀
相關推薦

2025-05-16 10:17:54

2021-05-10 17:20:55

AIOps開發人員人工智能

2011-08-08 13:45:58

jQuery

2023-04-24 08:00:00

2023-03-06 00:27:02

Kubernetesscheduler系統

2024-09-06 17:55:27

Springboot開發

2023-04-18 14:53:48

2010-08-02 16:56:03

ICMP協議

2023-04-18 15:09:50

2021-08-03 14:29:30

ARPANET互聯網協議TCP

2022-09-16 00:11:45

PyTorch神經網絡存儲

2017-11-17 09:13:31

Java注解

2023-04-13 07:47:31

ChatGPT芯片產業AI

2022-02-11 10:27:28

面部識別算法人工智能

2020-09-11 08:41:50

域名系統DNS網絡

2022-08-12 07:00:00

NFC安全性RFID

2023-03-21 10:20:20

2021-02-26 14:40:16

Kubernetes調度器

2024-08-19 00:25:00

2023-11-24 17:20:41

無人機無人駕駛飛行器
點贊
收藏

51CTO技術棧公眾號

jizz日本免费| 一本色道久久88亚洲精品综合| 欧美h在线观看| 成人a'v在线播放| 欧美一区午夜视频在线观看| 日韩欧美视频免费在线观看| 午夜激情小视频| 日韩精品久久理论片| 超碰精品一区二区三区乱码| 亚洲精品在线视频免费观看| 欧美xnxx| 亚洲国产一区二区三区| 欧美最大成人综合网| 精品人妻无码一区二区色欲产成人| 在线视频观看日韩| 色吧影院999| 亚洲精品久久一区二区三区777| 免费福利视频一区二区三区| 尤物在线观看一区| 欧美福利一区二区三区| 国产高清免费在线观看| 亚洲自拍另类| 欧美国产日韩一区二区| 中字幕一区二区三区乱码| 日韩免费一级| 欧美三片在线视频观看| 自拍日韩亚洲一区在线| 1024视频在线| 91欧美一区二区| 亚洲最大av网站| 精品乱码一区内射人妻无码| 亚洲高清成人| 久久在线免费视频| 欧美黄色一级生活片| 97se亚洲国产一区二区三区| 欧美日韩精品电影| 欧美视频第一区| www在线看| 亚洲欧美一区二区三区孕妇| 午夜精品一区二区三区四区| 午夜视频1000| 成人激情午夜影院| 97超碰人人模人人爽人人看| 亚洲熟女综合色一区二区三区| 国内精品久久久久久久97牛牛| 日韩一级裸体免费视频| 无码人妻丰满熟妇啪啪欧美| 欧美精品中文| 精品免费国产二区三区| 91大神免费观看| 欧美成人福利| 欧美年轻男男videosbes| 97成人在线观看视频| а√在线天堂官网| 亚洲国产日韩一级| 国产va亚洲va在线va| 黑人玩欧美人三根一起进| 亚洲三级在线播放| 一区二区三区四区免费观看| 日本在线视频观看| 亚洲视频在线一区观看| 正在播放亚洲| 中文字幕伦理免费在线视频| 一区二区三区在线视频播放| 日韩一级片一区二区| www.欧美日本韩国| 夜夜精品视频一区二区| 99热这里只有精品免费| 蜜臀av国内免费精品久久久夜夜| 一区二区免费视频| 欧美日韩福利在线| a在线视频v视频| 欧美日韩亚洲激情| 99视频在线免费| 另类一区二区| 日韩免费一区二区三区在线播放| 亚洲图片欧美另类| 亚州国产精品| 国产亚洲欧美一区| 自拍偷拍你懂的| 亚洲草久电影| 久久久久久久999| 亚洲日本韩国在线| 日韩电影在线免费| 成人激情电影一区二区| 亚洲精品一区二区三区蜜桃| 99精品1区2区| 亚洲欧美成人一区| 肉肉视频在线观看| 欧美日韩一区二区三区| 亚洲人辣妹窥探嘘嘘| 国产在线视频欧美一区| 欧美精品一区二区三区久久久| 丰满大乳奶做爰ⅹxx视频| 精品久久久久久久久久久aⅴ| 少妇久久久久久| 日本一区二区三区免费乱视频 | 欧美xxxx少妇| 一区二区三区精品视频在线| 色综合久久久久无码专区| 欧美1级2级| 在线电影一区二区三区| 中文字幕一区三区久久女搜查官| av资源久久| 欧美国产第一页| 日韩中文字幕高清| 国产精品一品二品| 日韩电影天堂视频一区二区| av在线麻豆| 在线看一区二区| 国产三级三级三级看三级| 一区二区三区四区高清视频| 中文字幕欧美亚洲| 欧美a∨亚洲欧美亚洲| 狠狠色综合日日| 欧美日韩国产精品一区二区| av在线播放观看| 色综合天天做天天爱| 色黄视频免费看| 国产麻豆一区二区三区精品视频| 久国内精品在线| 中文字幕视频二区| 久久一留热品黄| 国产精品一色哟哟| 欧美日韩卡一| 亚洲无线码在线一区观看| 精品少妇爆乳无码av无码专区| 全部av―极品视觉盛宴亚洲| 精品国产一区二区三区日日嗨 | 中文字幕一区视频| 黄色网页免费在线观看| 日韩精品视频在线看| 中文字幕在线国产精品| 在线永久看片免费的视频| av中文一区二区三区| 青青草视频在线视频| 久久不卡日韩美女| 国产亚洲人成a一在线v站| 在线观看中文字幕视频| 成人深夜视频在线观看| 99视频精品全部免费看| 成人乱码手机视频| 色偷偷综合社区| 少妇无套内谢久久久久| 久久久久久久久久久久久夜| 国产日韩欧美精品在线观看| 中文字幕亚洲在线观看| 欧美麻豆久久久久久中文| 97成人在线观看| 国产精品伦理一区二区| 中文字幕永久视频| 成人羞羞视频播放网站| 国产精品入口尤物| 在线播放毛片| 在线观看日韩电影| 无码少妇精品一区二区免费动态| 免播放器亚洲| 日韩高清专区| 日本h片久久| 日韩在线观看网站| 国产精品久久久久久无人区 | 在线一区高清| 国产精品白丝久久av网站| 精品国模在线视频| 国产不卡av在线播放| 一区二区三区国产精品| 黄色性视频网站| 一区二区精品| 欧美少妇一区| 九九九精品视频| 久久久999精品免费| 精品国产av一区二区三区| 欧产日产国产精品视频| 欧美丝袜一区二区三区| 亚洲黄色小说视频| 国产精品自在| 三级视频网站在线| 一二三区不卡| 岛国视频一区免费观看| xxx.xxx欧美| 精品视频在线播放免| 中文在线a天堂| 亚洲欧美一区二区三区孕妇| 日韩少妇一区二区| 久久久久久久尹人综合网亚洲| 日韩videos| 日韩三区四区| 久久人91精品久久久久久不卡| 你懂得网站在线| 欧美日韩亚洲综合在线 欧美亚洲特黄一级| 91香蕉一区二区三区在线观看| 国产99一区视频免费| 蜜臀av午夜一区二区三区| 99久久九九| 狠狠色综合欧美激情| 欧洲成人一区| 欧美激情a在线| 九色网友自拍视频手机在线| 91精品欧美一区二区三区综合在| 国产精选第一页| 国产精品美女久久久久aⅴ| 免费观看黄网站| 视频一区免费在线观看| 无码人妻精品一区二区蜜桃百度| 色狠狠久久av综合| 91免费国产视频| 三上悠亚国产精品一区二区三区| 久久资源免费视频| 精品美女视频在线观看免费软件| 日韩午夜av一区| 免费观看日批视频| 亚洲最新视频在线观看| 久久久精品成人| av一区二区三区| 日日干日日操日日射| 亚洲一区欧美激情| 中文字幕の友人北条麻妃| 日本在线电影一区二区三区| 国产自产精品| 日韩一级淫片| 91精品久久久久久久久久久久久久 | 成人免费网站视频| 欧美极品美女电影一区| 亚洲成a人v欧美综合天堂麻豆| 精品亚洲一区二区三区| 性猛交xxxx乱大交孕妇印度| 欧美123区| 视频直播国产精品| 男女污视频在线观看| 亚洲第一区中文99精品| 精品国产亚洲av麻豆| 欧美精品v日韩精品v韩国精品v| 亚洲精品成人在线视频| 黄色成人在线播放| 国产网站在线看| 亚洲午夜久久久久久久久电影网| 熟女av一区二区| 欧美经典三级视频一区二区三区| 国产偷人妻精品一区| 成人网男人的天堂| 99久久久无码国产精品性波多| 韩国一区二区在线观看| 免费看涩涩视频| 日韩精品电影在线| 国产精品无码专区av在线播放| 亚洲人成免费| 男的插女的下面视频| 黄色欧美日韩| 激情五月婷婷六月| 欧美日韩一区自拍| 99re6这里有精品热视频| 伊人青青综合网| www.一区二区.com| 欧美日本中文| 成年人看的毛片| 亚洲经典在线看| 国产日产欧美视频| 日日夜夜精品视频免费| 成人午夜激情av| 久久精品国产**网站演员| 自拍偷拍一区二区三区四区| 久久99精品久久久久久国产越南| 欧美一级xxxx| 国产一区在线不卡| 黑人无套内谢中国美女| 国产成人精品aa毛片| 丰满岳乱妇一区二区| 久久婷婷综合激情| 第一次破处视频| 一色桃子久久精品亚洲| 久草视频在线资源站| 精品国产91乱高清在线观看| 4438国产精品一区二区| 欧美日韩一级二级| 精品人妻一区二区三区三区四区 | 亚洲av成人精品日韩在线播放| 日韩精品在线观看一区| 国产一二三区在线视频| 日韩在线观看成人| 黄网在线免费看| 青草成人免费视频| 日韩午夜电影免费看| av一区二区三区免费| 另类尿喷潮videofree| 欧美人与物videos另类| 91偷拍一区二区三区精品| 精品国偷自产一区二区三区| 日本怡春院一区二区| 女王人厕视频2ⅴk| 91美女在线观看| 欧洲美女女同性互添| 午夜影院久久久| 波多野结衣一本一道| 日韩精品最新网址| 毛片网站在线| 久久国产精品久久国产精品| 国产传媒在线观看| 91精品视频大全| 国产成人调教视频在线观看 | 狠狠久久亚洲欧美| 精品影片一区二区入口| 中文字幕综合网| 青青国产在线视频| 精品国产1区2区3区| 91av资源在线| 91精品国产色综合| 警花av一区二区三区| 欧美一区二区综合| 黄色亚洲精品| 亚洲免费成人在线视频| 国产日韩欧美精品在线| 日本三级中文字幕| 日韩免费性生活视频播放| 欧美三级电影一区二区三区| 欧美一级在线亚洲天堂| 日韩免费一级| www亚洲国产| 日本vs亚洲vs韩国一区三区二区| 日本一区二区在线观看视频| 自拍偷拍欧美精品| 在线免费观看av片| 亚洲人午夜精品免费| sm捆绑调教国产免费网站在线观看| 亚洲综合av影视| 99久久夜色精品国产亚洲96 | 久久久久久久久久影院| 精品久久国产字幕高潮| а√天堂资源地址在线下载| 国产欧美精品在线| 成人激情视频| 国产欧美高清在线| 成人国产电影网| 九九热精品免费视频| 欧美三级一区二区| av在线二区| 日本国产高清不卡| 亚洲精品播放| 九色自拍视频在线观看| 波多野结衣91| 免费一级a毛片夜夜看| 欧美一区二区三区视频在线观看| 韩国三级av在线免费观看| 97精品国产97久久久久久春色| 国产精品极品在线观看| 路边理发店露脸熟妇泻火| 国内精品视频666| jizzjizz日本少妇| 一区二区三区丝袜| 精品人妻无码一区二区色欲产成人| 久久精品亚洲94久久精品| 国产亚洲高清一区| 自拍偷拍一区二区三区| 国产美女一区二区三区| 国产精品国产三级国产传播| 精品视频免费看| 九七久久人人| 91在线观看免费高清| 欧美视频亚洲视频| 丰满饥渴老女人hd| 亚洲成人中文在线| 黄色av网站免费在线观看| 欧美国产日韩视频| 婷婷综合一区| 男人操女人免费| 国产精品免费久久| 一级成人免费视频| 久久国产精品免费视频| 精品午夜av| 久久久久久久9| xnxx国产精品| 国产又粗又猛又黄视频| 日韩亚洲欧美中文高清在线| 国产精久久一区二区| 日韩国产一级片| 99国产一区二区三精品乱码| 国产精品传媒在线观看| 中文字幕av一区中文字幕天堂| 欧美最新精品| youjizz.com亚洲| 国产成人a级片| 五月婷婷激情五月| 日韩在线观看精品| 凹凸成人在线| 色欲av无码一区二区人妻| 国产农村妇女毛片精品久久麻豆| 99久久亚洲精品日本无码| 欧美国产日本高清在线 | 日本一区二区三区视频在线| japanese在线视频| 国产a精品视频| 97久久久久久久| 中文字幕日本精品| 亚洲亚洲一区二区三区| 老司机午夜av| 亚洲色图都市小说| 国产福利片在线| 国产精品一区二区三区毛片淫片 | 91蜜桃臀久久一区二区| 久草资源站在线观看| 亚洲欧美二区三区|