前沿智能拓撲論・番外篇 01
外部記憶不等於知識閉包:檢索完成幻覺、覆蓋—信心失配與檢索閉合
Frontier Intelligence Topology — Extra Paper 01
External Memory Is Not Knowledge Closure: Retrieval Completion Illusion, Coverage–Confidence Mismatch, and Retrieval Closure
作者:Neo.K(許筌崴)
研究協作:GPT-5.6 Sol
機構:EveMissLab/一言諾科技有限公司
版本:v0.1
日期:2026-09-18
系列:前沿智能拓撲論(Frontier Intelligence Topology, FIT)・番外篇
摘要
現代人工智能不必、也不應被要求把所有文明知識完整內化於模型參數。搜尋、外部記憶、文件系統、知識庫、資料庫與工具都可以成為智能系統的延伸認知結構。因此:
Internalized Knowledge=Total Effective Knowledge.
然而,從「知識可以外部化」不能直接推出:
shallow retrieval is sufficient.
若模型本身對某個知識域掌握不足,而外部搜尋又只讀取少量摘要、搜尋片段、熱門來源或局部頁面,卻隨即宣稱「已閱讀」、「已了解」或「已研究」,則系統可能產生一種特殊失敗:
Retrieval Completion Illusion.
即:完成了搜尋行為,卻沒有完成知識閉合。
本文提出「檢索閉合」(Retrieval Closure)作為外部知識架構能否真正替代內化知識的重要條件。有效檢索不應只是:
Q→Top-k→A,
而應形成:
Q→S0→G0→S1→G1→⋯→St,
其中 St 為累積知識狀態, Gt 為當前知識缺口。只有當資訊增益、覆蓋、深度、連通性與保留性達到足夠條件,系統才能合理聲稱「已形成足以回答該問題的知識狀態」。
本文進一步定義:
- Retrieval Gain;
- Retained Knowledge Gain;
- Coverage;
- Depth;
- Connectivity;
- Persistence;
- Coverage–Confidence Mismatch;
- Search Redundancy;
- Gap-Directed Expansion;
- Retrieval Closure Score。
核心命題為:
Search=Retrieval Understanding=Retrieval Closure.
以及:
External Memory can substitute for internal memory only when retrieval, integration, persistence, and gap closure are sufficiently strong.
因此,真正高階的外部知識型智能不需要把整個世界背進模型,而需要在遇到知識不足時,能夠自主擴張、持續閱讀、追蹤缺口、保留狀態,直到形成足以支撐回答的局部世界模型。
關鍵詞
外部記憶、搜尋、檢索閉合、知識閉包、Retrieval Closure、RAG、認知擴張、資訊增益、覆蓋率、知識保留、局部世界觀、AGI、前沿智能拓撲論
1. 知識不必全部記在模型內部
假設智能系統的有效知識為:
Keff.
最簡單的表示可以寫成:
Keff=Kint+Kext
其中:
- Kint:內化於模型中的知識;
- Kext:可透過搜尋、記憶、文件、資料庫取得的外部知識。
因此:
Kint→all human knowledge
並不是高階智能的必要條件。
2. 但外部知識不是免費替代品
如果:
Kint↓,
要維持:
Keff,
至少需要:
Kretrieval↑,
Kintegration↑,
Kpersistence↑.
所以更合理:
Keff=f(Kint,Kretrieval,Kintegration,Kpersistence).
3. 搜尋不等於閱讀
最薄的搜尋流程:
Q→Search→Snippet→A.
其中模型可能只看到:
- 搜尋摘要;
- 第一頁結果;
- 少數熱門來源;
- 二手描述。
這仍然可以回答簡單問題。
但不能因此推出:
Source Understood.
4. 閱讀不等於理解
即使模型打開完整來源:
X,
也不代表:
Understand(X)=1.
完整理解還需要:
- 識別結構;
- 保留細節;
- 建立依賴;
- 追蹤角色/變量;
- 整合時間序列;
- 發現矛盾;
- 與其他來源交叉驗證。
因此:
Opened=Read=Integrated=Understood.
5. 檢索完成幻覺
本文定義:
Retrieval Completion Illusion(檢索完成幻覺)是指智能系統完成了有限搜尋或有限閱讀後,對自身知識覆蓋形成過高估計,並以近似「已了解完整來源」的方式輸出。
形式上:
CX≪1∧C^X≈1.
其中:
- CX:實際有效覆蓋;
- C^X:系統自我估計覆蓋。
6. 這和一般 hallucination 不同
一般 hallucination:
false content generation.
Retrieval Completion Illusion 則可能:
all retrieved facts are true
但問題在:
partial truth is represented as global understanding.
7. 局部真實可以形成局部世界觀
假設來源世界:
WX.
模型只取得:
S⊂WX.
若:
∣S∣≪∣WX∣,
但模型以:
S
推演整體:
WX,
則形成:
Local World Model.
8. 局部世界模型不一定錯
這點很重要。
S
內的資訊可能全部正確。
問題是:
Coverage
不足。
因此錯誤來源可能是:
omission
而不是:
fabrication.
9. 一部長篇作品的例子
考慮一部大型小說:
X.
它包含:
- 主線;
- 支線;
- 人物;
- 勢力;
- 時間線;
- 世界規則;
- 情節反轉;
- 角色動機;
- 設定修正。
若 AI 只讀:
然後宣稱:
已經看完/了解整部作品。
則:
Search Coverage≪Claimed Understanding.
10. 使用者真正不滿的不是「你沒背過」
使用者通常不是要求:
你必須在參數裡背完整部小說。
而是:
你剛才明明說你研究完了,為什麼我問支線細節你就不知道?
所以問題是:
Claimed Retrieval Closure
與:
Actual Retrieval Closure
不一致。
11. 搜尋型外部記憶的最低合理流程
本文提出:
Q→S0→G0→S1→G1→⋯→St.
其中:
- St:目前累積知識;
- Gt:當前缺口。
每一輪:
Gt=Gap(St,Q).
再:
St+1=St∪Retrieve(Gt).
12. 真正研究型搜尋不是重複同一查詢
若:
St+1≈St,
則:
ΔIt≈0.
這表示下一輪搜尋幾乎沒有增加有效資訊。
因此:
Repeated Search=Knowledge Expansion.
13. 資訊增益
定義:
ΔIt=I(St+1)−I(St).
高品質研究型檢索應在早期具有:
ΔIt>0.
隨著逐步閉合:
ΔIt→0.
14. 低資訊增益搜尋
如果系統每次都看:
則:
ΔIt≈0.
即使 API call 很多,
認知狀態也沒有真正變大。
15. Search Redundancy
定義:
RS=1−I(Retrievedt+1)I(St+1∖St).
高:
RS
表示:
新搜尋結果大多只是重複已知內容。
16. Gap-Directed Retrieval
真正高階搜尋不應只根據:
Q
重複搜。
而應根據:
Gt.
因此:
Queryt+1=f(Q,Gt,St).
這稱為:
Gap-Directed Retrieval.
17. 缺口本身需要被顯式表示
例如研究大型作品後:
Gt
可以包含:
- 某角色缺少後期狀態;
- 某支線時間順序不完整;
- 某設定只見二手來源;
- 某勢力關係存在衝突;
- 某事件動機沒有原文支持。
這比:
再搜尋一次作品名
有效得多。
18. Retrieval Breadth
定義:
BR=coverage across distinct subregions of the target domain.
例如小說研究:
19. Retrieval Depth
定義:
DR=depth reached inside each relevant subregion.
例如:
知道角色名字
與:
知道角色不同時期的動機、關係與轉折
深度不同。
20. Retrieval Connectivity
定義:
CR=Connectivity(St).
也就是:
搜到的資訊是否真正連起來?
如果知道:
卻不知道:
A→C→B,
那只是碎片集合。
21. Retrieval Persistence
定義:
PR=retention of retrieved structure across subsequent reasoning turns.
如果第一輪搜很多,
第二輪只剩:
thin summary,
則:
PR↓.
22. Retrieval Gain 不等於 Retained Knowledge Gain
定義:
Gretrieve=I(Straw)−I(St−1).
再定義:
Gretain=I(Stretained)−I(St−1retained).
可能:
Gretrieve≫0
但:
Gretain≈0.
23. 這是外部記憶架構很容易忽略的問題
大量 retrieval 可以發生,
但如果:
- context 被壓縮;
- summary 過薄;
- 狀態不持久;
- 細節被淘汰;
則真正有效知識增益有限。
所以:
Retrieval Throughput=Persistent Cognitive Gain.
24. 四維檢索結構
本文提出:
R=(BR,DR,CR,PR)
其中:
- BR:Breadth;
- DR:Depth;
- CR:Connectivity;
- PR:Persistence。
25. 單純 Top-k 主要保證什麼?
Top-k retrieval 主要保證:
local relevance.
但不自動保證:
BR,DR,CR,PR.
所以:
High Relevance=High Closure.
26. Retrieval Closure
本文定義:
Retrieval Closure 是指智能系統對特定問題域的外部知識擴張,已達到足以支撐當前推理與回答的覆蓋、深度、連通與保留狀態,且主要剩餘缺口已被識別。
記為:
RC(Q).
27. Retrieval Closure 不是「全部讀完」
對巨大知識域:
X,
要求:
CX=1
通常不現實。
所以 Retrieval Closure 是:
task-conditioned closure.
即:
對當前問題足夠。
28. 任務條件化閉合
令:
Q
為問題。
只需:
CX(Q)≥θQ.
而不是:
CX(X)=1.
因此:
Complete Source Coverage
不是必要條件。
29. 但「我看完整部作品」是更強 claim
如果系統聲稱:
我已經完整理解這部作品。
那隱含的:
θ
自然較高。
所以:
Claim Strength⇒Required Coverage.
30. Claim-Closure Consistency
定義:
KCC=1−∣C^X−CX∣.
若:
KCC→1,
表示自我聲稱與實際覆蓋一致。
31. Coverage–Confidence Mismatch
定義:
MCC=C^X−CX.
若:
MCC≫0,
表示:
系統高估自己已掌握多少。
這是 Retrieval Completion Illusion 的核心量。
32. 知識覆蓋也不是單一比例
更完整:
CX=f(Ctopic,Ctemporal,Crelational,Csource,Ccausal).
例如作品研究至少可分:
- 主題覆蓋;
- 時序覆蓋;
- 角色關係;
- 原始來源;
- 因果動機。
33. 一個模型可以主線覆蓋高、支線覆蓋低
所以:
Cmain≫0
不能推出:
Cworld≫0.
這就是大型敘事作品容易暴露的問題。
34. 敘事世界是一個很好的檢索閉合測試場
因為它同時要求:
- entities;
- relations;
- temporal order;
- causality;
- motivations;
- rules;
- exceptions。
因此:
narrative world
本身是一個小型 world-model benchmark。
35. 作品內反事實推理要求更高閉合
如果問:
若事件 E 沒發生,後續會怎樣?
模型需要:
World Model
而不是單純 factual recall。
所以:
Counterfactual Narrative Reasoning
可以測:
CR
與:
DR.
36. 搜尋型回答的第一個停止條件
最簡單:
ΔIt<ϵ.
但這不夠。
因為可能只是:
搜尋器一直找到重複內容。
37. 第二個停止條件:Coverage
要求:
CX(Q)≥θ.
38. 第三個停止條件:Gap Closure
主要缺口:
Gt
已:
∣Gt∣≤γ.
39. 第四個停止條件:Source Diversity
避免:
single-source local world.
要求至少:
DS≥dmin.
其中:
DS
是來源多樣性。
40. 第五個停止條件:Contradiction Handling
若不同來源:
Si,Sj
存在:
Si⊥Sj,
不能直接平均。
需要:
resolve / preserve uncertainty.
41. Retrieval Closure Score
本文提出工作性指標:
RCS=wBBR+wDDR+wCCR+wPPR+wGGC+wSSD−wRRS
其中:
- GC:Gap Closure;
- SD:Source Diversity;
- RS:Search Redundancy。
42. 更合理的是乘法版本
若某一維接近零,
閉合可能直接崩潰。
因此也可寫:
RCS×=BRαDRβCRγPRδGCηSDζ(1−RS)ρ.
此形式只是工作模型,不是定理。
43. 內化知識與檢索閉合的替代條件
若希望:
Kint↓,
則需要:
RCS↑.
所以可提出:
Kint↓⇒RCS↑
作為系統設計的必要補償方向。
44. 不是所有知識都值得內化
高頻、核心、低變動知識:
Kcore
可能適合內化。
高變動、長尾、巨大知識:
Ktail
可能適合外部化。
因此理想分工可能是:
Kcore→Internal
Ktail→External + Retrieval Closure.
45. Knowledge Placement Problem
因此產生:
Knowledge Placement Problem.
即:
哪些知識應內化?
哪些應外部化?
哪些應動態載入?
這不是單純儲存成本問題。
還涉及:
- latency;
- reliability;
- update frequency;
- privacy;
- retrieval cost;
- reasoning dependence。
46. 內化知識的優勢
內化:
Kint
通常具有:
但缺點:
47. 外部知識的優勢
外部:
Kext
具有:
但缺點:
- 搜尋成本;
- 片面;
- context loss;
- state persistence;
- retrieval failure。
48. 理想架構不是二選一
所以:
Internal Memory⊕External Retrieval
比:
Internal Only
或:
Search Everything Every Time
更合理。
49. 外部檢索不能每次都從零開始
如果每一輪:
S0=∅,
那麼:
Research State
無法累積。
理想應:
St+1⊇St.
50. Knowledge Monotonicity
在沒有發現錯誤的情況下:
I(St+1)≥I(St).
若資訊被修正,
則至少:
quality-adjusted knowledge
應提高。
51. 再要求深入,不應只是「多寫一點」
如果使用者要求:
再深入。
合理反應應是:
Bt+1⊃Bt.
即:
52. 假深入
如果只是:
At+1=At+more wording,
但:
St+1≈St,
則:
Verbal Expansion=Knowledge Expansion.
53. Dynamic Expansion Ratio
定義:
ED=I(St)I(St+1∖St).
使用者要求深入後,
若:
ED≈0,
表示幾乎沒有新增有效世界。
54. Retrieval Breadth 與 Depth 的比例
一個系統可能:
BR≫0,DR≪0.
即:
什麼都碰一下。
也可能:
BR≪0,DR≫0.
即:
只深挖一小塊。
兩者都不必然閉合。
55. 理想檢索需要局部深度與全域覆蓋
因此:
BR>Bmin∧DR>Dmin.
56. Connectivity 更重要
若:
BR,DR
都高,
但:
CR≈0,
模型仍可能只有:
many disconnected facts.
因此:
Retrieval Understanding
必須包含關係重建。
57. Persistence 決定多輪研究是否可能
如果:
PR≈0,
每輪搜尋都近似:
temporary intelligence burst.
搜尋結束後:
Keff↓.
58. 這對長時空 Agent 特別關鍵
長時間研究需要:
S0→S1→⋯→ST.
若每輪壓縮造成:
St→S~t
且:
I(S~t)≪I(St),
研究深度會反覆重置。
59. Compression Loss
定義:
LC=1−I(St)I(S~t).
高:
LC
表示:
context crystallization 丟失大量有效結構。
60. 不是保留所有 token,而是保留可重建結構
理想 persistence 不要求:
store everything verbatim.
而是保留:
- nodes;
- relations;
- provenance;
- uncertainty;
- unresolved gaps;
- key details;
- dependency graph。
因此:
Compression=Forgetting
只要可重建性足夠高。
61. Retrieval Closure 的最小狀態格式
本文建議研究狀態:
St=(Kt,Gt,Et,Ut,Pt)
其中:
- Kt:已知;
- Gt:缺口;
- Et:證據;
- Ut:不確定性;
- Pt:來源/provenance。
62. Provenance 是外部知識的核心優勢
內化知識常難回答:
你從哪裡知道?
外部 retrieval 可以保留:
Source Trace.
因此:
Kext
在可驗證性上可能優於:
Kint.
63. 但引用一個來源不等於研究完整
來源追蹤只解決:
Where did this claim come from?
沒有解決:
Did you inspect enough of the domain?
所以:
Citation Quality=Coverage Quality.
64. 第一頁偏差
搜尋引擎通常排序:
Top(q).
如果 AI 永遠只讀:
Top1,…,Topk,
則容易形成:
Ranking-Induced World Narrowing.
65. Ranking-Induced World Narrowing
熱門、SEO、高權威來源:
P(retrieved)↑.
邊緣、少引用、深層來源:
P(retrieved)↓.
因此外部搜尋本身也可能重新製造:
knowledge density bias.
66. 所以外部搜尋也需要廣域策略
不是:
Search Top Results.
而是:
Search Mainstream+Search Gaps+Search Contradictions+Search Edge+Search Primary Sources.
67. Primary-Source Ratio
定義:
ρP=IretrievedIprimary.
對需要深入理解的任務,
ρP
不應過低。
68. Secondary-only Knowledge Risk
如果:
ρP≈0,
系統主要理解:
別人怎麼描述來源。
而不是:
來源本身說什麼。
這尤其容易出現在:
69. 原始材料的必要性取決於任務
如果只問:
作品作者是誰?
二手資料足夠。
如果問:
某角色中期心理轉折的文本依據?
就需要更高:
ρP.
所以:
Required Source Depth=f(Q).
70. Retrieval Claim Calibration
系統回答前應估計:
R^CS.
如果:
R^CS<θQ,
合理輸出應是:
我目前只完成局部檢索,還不足以聲稱完整理解。
這比假裝完成更可靠。
71. 「我看過了」應該是一個可校準聲明
所以:
I have read it
不應只是自然語言禮貌句。
而應對應某種:
retrieval state.
72. 研究型 AI 的誠實不只是引用誠實
還包括:
coverage honesty.
即:
我到底讀了多少?
這和:
epistemic calibration
直接相關。
73. Retrieval Honesty
定義:
HR=1−∣R^CS−RCS∣.
高:
HR
表示:
系統對自己搜尋完成度有良好校準。
74. Search-to-Closure Ratio
定義:
ηC=CsearchRCS.
這才是真正接近:
retrieval efficiency.
不是:
timenumber of searches.
75. 搜得快不等於閉得快
如果:
SearchRate↑
但:
RS↑,
則:
ηC
可能不升反降。
所以:
Fast Search=Fast Understanding.
76. 搜尋深度不等於檢索閉合
搜尋深度:
DS
可能表示:
看了很多頁。
但若:
則:
RCS
仍低。
因此:
Search Depth=Retrieval Closure.
77. 真正研究型 AI 的外部知識循環
本文提出:
Search→Read→Integrate→Gap Detect→Expand→Persist→Verify.
這才形成:
External Knowledge Cognition Loop.
78. 沒有 Gap Detect 就不是研究循環
如果缺少:
GapDetect,
系統不知道:
還缺什麼?
就只能依賴:
所以:
Gap Detection
是檢索閉合的核心 operator。
79. 沒有 Persist 也不是研究循環
如果:
St+1
不能保留:
St,
系統就會:
research without accumulation.
80. 沒有 Verify 則容易形成外部幻覺
就算所有資訊來自 web,
仍可能:
所以:
External Source=Verified Truth.
81. Retrieval Closure 與前沿智能的關係
前沿智能在未知域常會遇到:
Kint<Krequired.
如果具有高:
RCS,
它可以:
knowledge deficit→autonomous knowledge expansion.
82. 這是比「什麼都背下來」更可擴展的架構
因為文明知識:
∣K∣→huge.
模型內化容量有限。
所以真正可擴展方向更可能是:
Core Internal Knowledge+High-Closure External Cognition.
83. 外部檢索閉合是一種能力,不只是工具功能
如果兩個模型使用相同搜尋引擎,
但:
- 一個只讀 top results;
- 一個會追缺口、擴張、整合、保留;
它們最終能力完全不同。
所以:
Same Search Tool=Same Retrieval Intelligence.
84. Retrieval Intelligence
本文提出:
RI=f(QE,GD,BR,DR,CR,PR,VR)
其中:
- QE:Query Expansion;
- GD:Gap Detection;
- BR:Breadth;
- DR:Depth;
- CR:Connectivity;
- PR:Persistence;
- VR:Verification。
85. 這是一個新的前沿能力維度
因此:
Retrieval Intelligence
不能只看:
會不會用搜尋工具。
而應看:
能不能把外部資訊真正轉成新的認知狀態。
86. 可否證條件
本文假說也允許被削弱。
86.1 Internal Sufficiency
如果模型內部知識已足以覆蓋絕大多數高價值任務,
則高 Retrieval Closure 的重要性下降。
86.2 Shallow Retrieval Sufficiency
如果大量實驗顯示 top-k shallow retrieval 已能穩定達到與深度閉合相同結果,
則本文對多輪擴張的必要性被削弱。
86.3 Persistence Irrelevance
若保留完整研究狀態與只保留薄摘要在長時程研究結果上無顯著差異,
則 PR 權重應下降。
86.4 Gap Detection Redundancy
若簡單 query expansion 能取代 gap-directed retrieval,
則 Gap Detection 不必作為獨立能力。
87. 非主張
本文不主張:
- 所有知識都應內化;
- 所有查詢都需要深度研究;
- 每次搜尋都要讀完整來源;
- 搜尋工具沒有價值;
- Top-k retrieval 永遠不夠;
- 長文一定要逐字全部保留;
- 來源越多越好;
- 邊緣來源一定比主流來源好;
- 外部記憶可以完全取代內部模型知識。
本文真正主張的是:
外部知識只有在被真正檢索、整合、保留與缺口閉合後,才形成可用認知。
88. 核心結論
一個高階 AI 不需要把所有書都背進參數。
但如果它不知道,
就必須能:
不知道→搜尋→擴張→整合→保留→閉合.
如果它只做到:
不知道→搜一下→回答,
那麼外部記憶並沒有真正補足知識缺口。
89. 最終命題
本文提出:
External memory can substitute for internalized knowledge only to the extent that the system can achieve retrieval closure.
中文:
外部記憶能否替代內化知識,不取決於「能不能搜尋」,而取決於「能不能把搜尋真正閉合成可持續使用的知識狀態」。
90. 說成人話
你可以不背一本三百萬字的小說。
沒問題。
但如果我叫你研究它,
你不能:
然後跟我說:
我看完了。
真正合理的是:
我目前完成主線與核心人物的第一輪覆蓋,但支線、後期時間線與幾個角色關係仍有缺口;如果要回答整部作品層級的問題,我還需要繼續擴張。
這就是:
Retrieval Honesty.
真正高階的外部記憶型智能,不是:
什麼都不用記,反正可以搜。
而是:
不必什麼都記,但一旦需要,它真的能把缺失的世界重新建起來。
附錄 A:檢索四維結構
R=(BR,DR,CR,PR)
其中:
- BR:Breadth;
- DR:Depth;
- CR:Connectivity;
- PR:Persistence。
附錄 B:檢索循環
Q→S0→G0→S1→G1→⋯→St
其中:
Gt=Gap(St,Q),
St+1=St∪Retrieve(Gt).
附錄 C:資訊增益
ΔIt=I(St+1)−I(St)
附錄 D:Coverage–Confidence Mismatch
MCC=C^X−CX
附錄 E:Retrieval Closure Score
RCS=wBBR+wDDR+wCCR+wPPR+wGGC+wSSD−wRRS
附錄 F:Retrieval Intelligence
RI=f(QE,GD,BR,DR,CR,PR,VR)
附錄 G:與《前沿智能拓撲論》的接口
Paper 02 提出:
Information Quantity=Information Topology.
本篇補充:
Retrieved Information Quantity=Retrieved Knowledge Topology.
Paper 05 提出:
Core Capability=Augmented Capability.
本篇再補:
Augmentation Quality=Tool Availability.
Paper 07 提出:
Unknown→Testable Possibility.
本篇則說明:
當 unknown 的主要原因只是知識不足時,第一個必要能力不是胡亂生成,而是:
Unknown→Retrieval Closure.
附錄 H:番外篇總結式
Search=Read=Integrate=Retain=Retrieval Closure.
真正可擴展的外部知識型智能應滿足:
Knowledge Deficit→Gap Detection→Directed Retrieval→Integration→Persistence→Closure.