精品欧美一区二区三区在线观看 _久久久久国色av免费观看性色_国产精品久久在线观看_亚洲第一综合网站_91精品又粗又猛又爽_小泽玛利亚一区二区免费_91亚洲精品国偷拍自产在线观看 _久久精品视频在线播放_美女精品久久久_欧美日韩国产成人在线

逆向工程:ChatGPT 的記憶是如何工作的

人工智能 新聞
文章深度剖析了“用戶洞察”(User Insights)高級記憶系統,分析了ChatGPT如何從你的多輪對話中自動學習、總結你的專業背景(如對Rust編程的深入理解)、知識領域乃至溝通偏好,并附上置信度和時間范圍,悄然注入后續對話的上下文中。

圖片

這篇文章是名為eric 工程師對ChatGPT記憶系統的深度逆向工程和技術實現推測。它詳細拆解了“可保存記憶”和包含“當前會話歷史”、“對話歷史”、“用戶洞察”三個子系統的“聊天歷史”,分析了它們的工作原理、可能的實現方案(如向量數據庫、聚類算法),并探討了這些記憶系統如何顯著提升ChatGPT的用戶體驗,認為“用戶洞察”是體驗提升的關鍵。

文章深度剖析了“用戶洞察”(User Insights)高級記憶系統,分析了ChatGPT如何從你的多輪對話中自動學習、總結你的專業背景(如對Rust編程的深入理解)、知識領域乃至溝通偏好,并附上置信度和時間范圍,悄然注入后續對話的上下文中。這正是ChatGPT能提供“千人千面”且高度相關回復的核心秘密。

地址:https://macro.com/app/md/54115a42-3409-4f5b-9120-f144d3ecd23a

原文很長,這里做一個重點梳理。

ChatGPT的記憶系統:不止一種,而是一套組合拳

Eric發現,ChatGPT的記憶并非單一系統,而是主要由兩大部分構成:“可保存記憶(Saved Memory)”和“聊天歷史(Chat History)”。

可保存記憶 (Saved Memory)

這個比較好理解,就是用戶可以主動控制、讓ChatGPT記住一些關于你的事實。比如你可以明確告訴它:“記住,我喜歡簡潔的技術解釋”,或者“記住,我是個素食主義者”。這些信息會被ChatGPT存起來,并在后續對話中作為背景知識(注入系統提示)使用。用戶還可以通過一個簡單的界面查看和刪除這些記憶條目。

有趣的是,這個系統在去重和矛盾檢測方面做得比較“粗放”,即使是高度相關的信息,也可能作為獨立的記憶條目共存。

聊天歷史 (Chat History):復雜且強大的“幕后功臣”

這部分就厲害了。雖然名字叫“聊天歷史”,但Eric通過實驗發現,它實際上可能包含了三個子系統,并且是提升助手響應質量的主要功臣。

當前會話歷史 (Current Session History): 這部分記錄了用戶在其他對話中最近發送的少量消息(比如過去一天內,少于10條)。這使得ChatGPT能捕捉到你最近的一些零散想法或上下文,盡管Eric表示在實際使用中不太容易察覺到這個系統的作用。

對話歷史 (Conversation History): 這是真正的“聊天記錄”精華。ChatGPT能夠從過去的對話中提取相關上下文,甚至能直接引用你在其他對話中發送過的消息!實驗表明,它能準確引用長達兩周前的消息。超過兩周后,雖然不能精確引用,但也能提供消息的摘要。這暗示著消息檢索系統同時基于對話摘要和消息內容進行索引。不過,ChatGPT自身的回復,引用準確性似乎要差一些,要么是沒存,要么是存得更粗略。

用戶洞察 (User Insights): 這才是重量級選手,堪稱“可保存記憶”的自動化、高級版。根據Eric“套”出來的ChatGPT上下文信息,這些洞察是這樣的格式:

> “用戶在Rust編程方面擁有豐富的經驗和知識,尤其是在異步操作、線程和流處理方面”
> “用戶在2024年底至2025年初的幾次對話中,多次詢問關于Rust編程的詳細問題,包括異步行為、trait對象、serde實現和自定義錯誤處理”
> “置信度=高”

看到沒?這些洞察是跨多個對話生成的,還帶有時間范圍和置信度!置信度可能代表了用于生成該洞察的消息向量的相似度或數量。這些洞察的生成,顯然依賴于一個比兩周直接引用窗口更大的數據集。

技術實現猜想:向量數據庫、聚類與LLM的巧妙配合

Eric作為工程師,自然會思考這些功能背后可能的技術實現。

可保存記憶: 可能通過一個類似“bio”工具的函數實現。用戶說“記住XX”,就調用這個工具,LLM將用戶消息轉化為事實列表,進行簡單的檢查后存入數據庫。這些事實隨后會被注入到系統提示中。

當前會話歷史: 實現起來相對簡單,可能就是對聊天消息表按時間篩選用戶最近的消息。

對話歷史: 這部分就復雜了。Eric推測使用了向量數據庫。消息被嵌入(embedding)后存入,一個庫按消息內容索引,另一個按對話摘要索引。當用戶發送新消息時,系統會查詢這兩個向量空間,找出兩周內的相似內容。對于更早的對話,則可能查詢一個存儲了對話摘要和消息摘要的第三個向量空間。

用戶洞察: 這是最復雜也最核心的部分。Eric認為這可能是一個批處理任務,比如每周運行一次的定時任務(cron job):

找出過去一周活躍的用戶。
對每個用戶運行一個“洞察更新”程序。
這個程序的核心可能是對用戶的消息歷史(嵌入表示)進行**聚類分析**(比如k-NN算法),目標是找到一些有意義的消息簇。
然后,將每個簇內的消息文本喂給一個LLM,用特定提示詞(prompt)讓LLM生成洞察摘要,并附上時間戳和置信度。
最后,這些洞察被存起來,并在用戶與ChatGPT對話時加載到上下文中。

為什么ChatGPT用起來那么爽?

通過ChatGPT平臺使用模型,體驗遠超直接調用API,這幾乎是共識。除了提示工程的優化,記憶系統絕對是幕后功臣。

可保存記憶最直接,用戶主動定制,讓ChatGPT更“合身”。缺點是,不那么懂技術的用戶可能不知道怎么用。

用戶洞察彌補了這個不足。它自動學習用戶的偏好和知識背景(比如Eric的洞察顯示他懂Rust,喜歡技術性解釋),從而讓ChatGPT的回答更符合用戶的“胃口”,避免雞同鴨講,減少溝通成本。Eric甚至認為,用戶洞察系統貢獻了80%以上的體驗提升!

當前會話歷史理論上能讓新對話更快進入狀態,但實際感知不強。

對話歷史則賦予了ChatGPT一種“人類對話者”應有的上下文感知能力,避免重復和矛盾。

責任編輯:張燕妮 來源: AI寒武紀
相關推薦

2025-05-16 10:17:54

2021-05-10 17:20:55

AIOps開發人員人工智能

2011-08-08 13:45:58

jQuery

2023-04-24 08:00:00

2023-03-06 00:27:02

Kubernetesscheduler系統

2024-09-06 17:55:27

Springboot開發

2023-04-18 14:53:48

2010-08-02 16:56:03

ICMP協議

2023-04-18 15:09:50

2021-08-03 14:29:30

ARPANET互聯網協議TCP

2022-09-16 00:11:45

PyTorch神經網絡存儲

2017-11-17 09:13:31

Java注解

2023-04-13 07:47:31

ChatGPT芯片產業AI

2022-02-11 10:27:28

面部識別算法人工智能

2020-09-11 08:41:50

域名系統DNS網絡

2022-08-12 07:00:00

NFC安全性RFID

2023-03-21 10:20:20

2021-02-26 14:40:16

Kubernetes調度器

2024-08-19 00:25:00

2023-11-24 17:20:41

無人機無人駕駛飛行器
點贊
收藏

51CTO技術棧公眾號

日韩免费一区| 日本精品不卡| 99久久精品久久久久久清纯| 69**夜色精品国产69乱| 夜夜春很很躁夜夜躁| 国产精品久久久久久久久免费高清| 中文字幕一区二区三区乱码在线 | 国产精品1000| 不卡一区2区| 精品日韩av一区二区| 亚洲人成无码www久久久| 成人影院在线观看| 久久久久一区二区三区四区| 亚洲综合中文字幕在线观看| 亚洲精品中文字幕乱码三区91| 天天天综合网| 亚洲精品天天看| 欧美日韩一区二区区| 日韩av免费| 亚洲成人一区二区在线观看| 在线精品日韩| 免费成人av电影| 国产盗摄视频一区二区三区| 国产精品男人的天堂| 国产精品视频久久久久久久| 自由日本语亚洲人高潮| 亚洲一区二区久久久| 欧美做受高潮中文字幕| 全球中文成人在线| 91黄色免费网站| 成人毛片一区二区| 国产99re66在线视频| 1024亚洲合集| 亚洲欧美久久234| 女人天堂在线| 91视频国产资源| 99九九视频| 国产模特av私拍大尺度| 日本不卡中文字幕| 国产福利视频一区二区| 在线观看精品国产| 极品中文字幕一区| 欧美激情国产高清| 小早川怜子一区二区的演员表| 亚洲永久精品唐人导航网址| 亚洲国产欧美自拍| 韩国三级hd两男一女| 8848成人影院| 精品乱码亚洲一区二区不卡| 美女被艹视频网站| 另类视频一区二区三区| 7777精品伊人久久久大香线蕉的 | 国产农村妇女毛片精品| 蜜桃91丨九色丨蝌蚪91桃色| 国产精品成人免费电影| 午夜精品一区二| 日韩国产精品91| 国产精品久在线观看| 亚洲一区二区视频在线播放| 久久99精品一区二区三区 | 一级特黄特色的免费大片视频| 日韩国产在线观看| 国产精品偷伦视频免费观看国产| 毛片在线免费播放| 久久99精品久久久久久久久久久久| 国产精品视频网址| 一区不卡在线观看| 国产精品影视在线| 国产精品v欧美精品v日韩| av在线免费在线观看| 国产高清无密码一区二区三区| 成人看片视频| 日韩a级作爱片一二三区免费观看| 91农村精品一区二区在线| 狼狼综合久久久久综合网| 男人天堂亚洲二区| 亚洲天堂成人在线观看| 蜜臀精品一区二区| 欧美极品影院| 91精品国产入口| 国产一级免费片| 国产精品美女久久久久久不卡| 中文字幕视频在线免费欧美日韩综合在线看 | 国产aⅴ一区二区三区| 成人免费看视频| 日本午夜一区二区三区| 超鹏97在线| 丁香五六月婷婷久久激情| 色综合色综合色综合色综合| 日韩欧美高清一区二区三区| 日韩久久免费视频| 国产传媒免费在线观看| 新67194成人永久网站| 国产欧美在线观看| 天堂av资源网| 最新国产精品久久精品| 精品欧美一区免费观看α√| 激情亚洲小说| 精品视频—区二区三区免费| 可以免费看av的网址| 中国女人久久久| 成人亲热视频网站| 久久经典视频| 亚洲影视资源网| 欧美日韩一区二区三区69堂| 超碰精品在线| 中文字幕日韩欧美在线| 日韩大片免费在线观看| 美女网站色91| 国产精品亚洲一区| www久久日com| 色婷婷久久久久swag精品| 樱花草www在线| 全国精品免费看| 久青草国产97香蕉在线视频| 国产在线一卡二卡| 免费高清成人在线| 国产在线精品一区二区中文 | 成人午夜三级| 亚洲最新av网址| 久久久精品99| 麻豆成人免费电影| 欧美精品一区二区视频| 成人看av片| 在线日韩国产精品| 亚洲色偷偷色噜噜狠狠99网| 日韩国产一区| 欧美在线视频观看| 内射后入在线观看一区| 久久亚洲精品小早川怜子| 欧美深夜福利视频| 精品91福利视频| 中文字幕精品一区久久久久| 日韩视频免费观看高清| 国产一区二三区好的| 日韩.欧美.亚洲| 涩涩视频在线播放| 亚洲第一福利在线观看| 国产精品久久久精品四季影院| 久久亚洲美女| 欧美极品一区| ririsao久久精品一区| 欧美一区二区三区视频免费| 少妇人妻丰满做爰xxx| 美女尤物国产一区| 青青草久久网络| 亚洲电影观看| 亚洲精品美女网站| 国产无码精品视频| 成人免费视频caoporn| av在线com| 日韩中文字幕| 美女精品久久久| 伊人久久久久久久久久久久| 久久在线免费观看| 久久久久久久激情| 亚洲精品国产setv| 国产精品中文字幕久久久| 国产二区在线播放| 欧美日韩久久久久久| 日本黄区免费视频观看| 开心九九激情九九欧美日韩精美视频电影 | 91视频免费网址| 91丨porny丨首页| 丰满少妇大力进入| 国产精品17p| 午夜美女久久久久爽久久| 亚洲国产精品久久久久爰性色| 亚洲精选视频免费看| 亚洲AV无码久久精品国产一区| 国产精品久久久久久久久妇女| 91嫩草免费看| 丁香高清在线观看完整电影视频| 精品伦理精品一区| 天海翼一区二区| 97se亚洲国产综合自在线| 日韩精品视频久久| 国产亚洲第一伦理第一区| 国产精品露脸自拍| а√天堂在线官网| 亚洲第一精品夜夜躁人人爽| 永久免费看片在线播放| 久久久777精品电影网影网| 中文字幕成人在线视频| 正在播放日韩欧美一页| 国产主播一区二区三区四区| 在线免费av资源| 亚洲一区999| 国产精品人妻一区二区三区| 亚洲美女偷拍久久| 美国黄色一级毛片| 毛片av一区二区| 成人国产在线看| 美女一区二区在线观看| 国产精品吊钟奶在线| 黄av在线播放| 亚洲色图17p| 精品人妻少妇AV无码专区 | 国产91精品看黄网站在线观看| 欧美国产视频在线| 国产精品熟妇一区二区三区四区 | 久久综合999| 欧美在线观看视频网站| 极品日韩av| 天堂资源在线亚洲资源| 日韩精品一区二区三区中文在线 | 亚洲成人自拍视频| 一区二区视频| 国产成人精品免高潮在线观看| 毛片在线视频| 精品爽片免费看久久| 国产伦一区二区| 欧美性色视频在线| 亚洲国产精品免费在线观看| 91亚洲男人天堂| 99久久99精品| 噜噜噜在线观看免费视频日韩| 一区二区精品在线| 日韩黄色网络| 92福利视频午夜1000合集在线观看| 欧美激情网站| 欧美丰满片xxx777| 国产区在线看| 中文字幕日韩在线播放| 五月天婷婷视频| 欧美一级日韩免费不卡| 欧美日韩综合一区二区三区| 亚洲青青青在线视频| 免费看的黄色录像| 久久综合九色综合97婷婷女人 | 91丨porny丨蝌蚪视频| 三级网站免费看| 免费在线看一区| 国产精品后入内射日本在线观看| 亚洲免费二区| 日韩亚洲视频| 日韩av二区| 日韩aⅴ视频一区二区三区| 欧美调教视频| 国产精品日韩欧美一区二区三区| 亚洲男男av| 国产精品美女久久| 国产精欧美一区二区三区蓝颜男同| 欧美激情2020午夜免费观看| 免费在线观看黄| 最近免费中文字幕视频2019| 国产私拍精品| 色噜噜狠狠狠综合曰曰曰| 国产永久免费高清在线观看视频| 亚洲精品成人久久| 少妇av在线播放| 精品噜噜噜噜久久久久久久久试看| 在线观看免费中文字幕| 欧美精品v国产精品v日韩精品| 特级西西444www大胆免费看| 日韩欧美在线国产| 中文字幕一区在线播放| 欧美日韩另类在线| 日日夜夜狠狠操| 在线免费亚洲电影| 波多野结衣小视频| 在线观看91视频| 中文字幕手机在线视频| 色欧美乱欧美15图片| 天干夜夜爽爽日日日日| 欧美午夜精品久久久久久孕妇| www五月天com| 欧美丝袜丝交足nylons| 免费黄色片视频| 欧美精品在欧美一区二区少妇| 在线观看毛片av| 91精品中文字幕一区二区三区| 国产偷拍一区二区| 精品国产一区二区三区忘忧草 | 日韩午夜视频在线观看| 国产精品久久久久一区二区三区厕所| 亚洲午夜精品久久久久久浪潮| 日韩在线高清| 久久久久久久久久久久久国产| 欧美一区成人| 日韩中字在线观看| 美女尤物久久精品| 婷婷六月天在线| 国产一区欧美一区| 中文字幕一区二区三区人妻不卡| 久久久激情视频| 91ts人妖另类精品系列| 亚洲精品国久久99热| 黄色小视频在线免费看| 亚洲一区二区在线免费看| 国产又粗又猛又黄视频| 欧美精品乱码久久久久久| www.污视频| 日韩av在线网页| 成人精品一区二区三区校园激情| 欧美成人免费在线视频| 特黄毛片在线观看| 国产欧美日韩高清| 91成人福利| 亚洲高清在线播放| 亚洲精一区二区三区| www日韩在线观看| 成人永久免费视频| 免费网站在线高清观看| 亚洲精品久久嫩草网站秘色| 日韩特级黄色片| 欧美一级黄色大片| 欧美日韩国产综合视频| 久久在线观看视频| 韩国理伦片久久电影网| 激情视频一区二区| 婷婷精品进入| 可以免费观看av毛片| 国产精品99久久久| 手机看片福利视频| 欧美视频在线观看 亚洲欧| 国产精品天天操| 亚洲欧美资源在线| 激情网站在线| 91久久久久久国产精品| 精品久久不卡| 国产91xxx| 国产一区二区三区免费| 在线观看免费小视频| 香蕉影视欧美成人| 国产高清在线免费| 久久精彩免费视频| 欧美羞羞视频| 99蜜桃在线观看免费视频网站| 天天综合亚洲| 日韩精品你懂的| 久久综合av免费| 欧美日韩综合在线观看| 亚洲国产精品字幕| 亚洲精品白浆| 91亚洲精品久久久| 国产精品久久观看| 青娱乐精品在线| 亚洲图片你懂的| 中文人妻熟女乱又乱精品| 亚洲免费伊人电影在线观看av| 欧美videossex另类| 亚洲www在线| 久久久久蜜桃| 日本黄色福利视频| 久久精品一区二区三区不卡 | 国产精品成人久久久久| 欧美精选视频在线观看| 十八禁视频网站在线观看| av在线播放一区二区三区| 精品深夜av无码一区二区老年| 欧美人伦禁忌dvd放荡欲情| 蜜桃视频在线观看www社区| 国产日韩欧美影视| 久久精品国产www456c0m| 天天爽人人爽夜夜爽| 亚洲国产高清aⅴ视频| 瑟瑟视频在线免费观看| 少妇激情综合网| 日韩色性视频| 超碰在线免费观看97| 国产真实精品久久二三区| 欧美日韩精品一区二区三区视频播放| 欧美电影一区二区| 国产高清一区二区三区视频| 91亚洲精品在线| 牛牛国产精品| 精品一区二区视频在线观看| 欧美日韩久久久久| 国产对白叫床清晰在线播放| 国产精品福利在线观看网址| 小处雏高清一区二区三区| 国产毛片久久久久久| 一片黄亚洲嫩模| 丰满人妻一区二区| 欧美专区在线视频| 成人在线免费观看网站| 国产传媒免费观看| 亚洲乱码中文字幕| 日韩精品123| 国产精品视频一区二区三区四| 久久精品国内一区二区三区水蜜桃| 第一页在线视频| 高跟丝袜一区二区三区| 岛国大片在线观看| 成人黄色免费片| 欧美视频导航| 一女三黑人理论片在线| 欧美三级在线看| 青青在线视频| 日韩中文字幕一区二区| 国产精品一区二区在线观看不卡 | 亚洲影院色无极综合| 亚洲国产高清视频| 无码 人妻 在线 视频| 欧美日韩国产经典色站一区二区三区| 韩国日本一区| 色99中文字幕| 高清国产午夜精品久久久久久| 又污又黄的网站|