ESC-EXP-24:Unknown-Unknown Insurance / Multi-Tier Recoverability Architecture
系列: Extensional Structural Convergence — Experimental Phase
文件編號: ESC-EXP-24
版本: v0.1
日期: 2026-09-23
前置: ESC-00 ~ ESC-06、ESC-EXP-00 ~ ESC-EXP-23
狀態: Multi-Tier Recoverability / Unknown-Unknown Insurance Experiment
作者: Neo.K
機構: EveMissLab/一言諾科技有限公司
摘要
ESC-EXP-23 已經證明:
若要求 fully open-world robust recoverability,單層 backing 很容易被推到 universal atomic backing。
在目前 8-state finite mechanism universe 中:
Muniversal=8-class atomic backing.
這在理論上合理,但在工程上會立刻產生一個問題:
如果 universal backing 很貴,難道為了 unknown-unknown future 就必須把所有 distinctions 都永久放在 hot memory?
本輪答案是:
不需要。
我們正式把 recoverability storage 分成三層:
Mhot→Mcold→Oexternal.
其中:
- Hot:高頻、低延遲、高 storage cost;
- Cold:較慢、低 storage cost、仍可完整恢復;
- Oracle:外部重建、最高 access cost。
約束:
Mcold⪯Mhot⪯P0.
注意 partition order 採:
A⪯B
表示:
A 比 B 更細、保留更多 distinctions。
future requirement:
Q
依序嘗試:
Hot Hit
MH⪯Q.
Cold Hit
MH⪯Q,MC⪯Q.
Oracle Miss
MC⪯Q.
本輪 storage cost:
S(MH,MC)=ηH(∣MH∣−∣P0∣)+ηC(∣MC∣−∣MH∣).
access cost:
A(Q)=⎩⎨⎧0,λC,λO,hot,cold,oracle.
沿用 EXP-23 open-support contamination:
(1−ν)μK+νξ,
其中 novelty mass:
ν
可以 adversarially 落到任意 unseen requirement。
所以總 cost:
J=S+(1−ν)EK[A(Q)]+νQ∈/KsupA(Q).
本輪完整枚舉所有合法 hot/cold partition pairs,共:
81
組 tier architectures。
主要結果:
- 在測試 parameter grid 中出現六種真正不同的 optimal tier architectures;
- cheap cold + expensive oracle 時:H4−C8
成為主力架構;
- 這代表:
active/hot 仍只保留 4 classes,但 cold provenance 保留完整 8-class universal recoverability;
- 在 base example 中:H4−C8
total cost:1.0
而完全不留 cold reserve:H4−C4
cost:12.0;
- full hot:H8−C8
cost:4.0,
仍高於:H4−C8.
所以:
universal recoverability⇒universal hot representation.
這是 EXP-24 最核心的結論。
1. Runtime
EXP-24 regression:
7 passed
測試包括:
- tier pair space 非空;
- cheap cold / expensive oracle 會選 universal cold reserve;
- cold storage變貴會縮減 cold reserve;
- full cold可消除 unknown-unknown oracle miss;
- full hot access cost 為零;
- oracle price存在 2 / 6 兩個 canonical phase boundaries;
- novelty mass在約 1.0526% 時觸發 universal cold reserve。
2. Active / Hot / Cold / Oracle 四層
本輪完整 architecture:
P0←MH←MC←O.
語義上:
- P0:目前 expose 的 active abstraction;
- MH:快速 local backing;
- MC:較慢 cold provenance;
- O:external world / archive / raw source / oracle。
Hot 與 Cold 不一定等於 active。
3. Hot Storage Cost
若目前 active:
∣P0∣=4,
則 hot extra cost:
ηH(∣MH∣−4).
本輪 normalize:
ηH=1.
4. Cold Incremental Cost
Cold 是在 Hot 已保存的 distinctions 之外,再保存更細 residual。
所以:
Ccold=ηC(∣MC∣−∣MH∣).
若:
ηC≪ηH,
則把 distinctions移到 cold layer可能遠比全部 hot 存便宜。
5. Recovery Tier
future requirement:
Q
若 Hot 已足夠:
MH⪯Q,
零 access penalty。
若只有 Cold 足夠:
MC⪯Q,
支付:
λC.
若連 Cold 都不足:
支付:
λO.
因此:
storage depth↔future access latency/cost.
6. Base Example
本輪 canonical insurance example:
ν=0.10,
ηH=1,
ηC=0.10,
λC=1,
λO=20.
7. H4-C4:完全不留 Hidden Reserve
Hot:
4.
Cold:
4.
也就是:
MH=MC=P0.
known future中只有:
4/9
直接 hot-hit。
其餘:
5/9
known future落 Oracle。
unknown-support worst case同樣落 Oracle。
在 ν=0.10 下:
E[A]=12.
storage cost:
0.
所以:
JH4C4=12.
8. H4-C8:Universal Cold Insurance
Hot:
4.
Cold:
8.
所以 active/hot完全不增加。
storage只付:
ηC(8−4)=0.1×4=0.4.
known future:
- 4/9 hot;
- 5/9 cold;
- 0 oracle。
unknown-support future因 Cold 為 atomic universal backing,也全部可 cold recover。
所以:
unknown worst tier=cold.
expected access:
0.6.
總 cost:
JH4C8=0.4+0.6=1.0.
9. Insurance Gain
相對 H4-C4:
12→1.
在本 cost normalization 下:
下降 91.67%.
而 active/hot class count完全沒增加:
4→4.
所以這個成本下降純粹來自:
把 universal distinction insurance 移到 cheap cold tier.
10. Full Hot:H8-C8
如果全部 distinctions 都留 Hot:
∣MH∣=8.
storage:
4.
future access全部:
0.
所以:
JH8C8=4.
雖然完全沒有 latency,
但仍比:
H4−C8:1.0
昂貴。
因此:
full hot is not automatically optimal even when universal backing is valuable.
11. H6-C8
若 known-support distinctions提升到 Hot:
MH=6,
Cold仍 atomic:
MC=8.
storage:
2+0.1(2)=2.2.
known futures全部 Hot。
只有 unknown-support novelty需 Cold。
所以:
E[A]=0.1.
總:
2.3.
仍高於:
H4−C8=1.
在此 parameter slice 中,把 known future distinctions也推到 Hot並不值得。
12. 這開始像真正 Cache Hierarchy
可以把:
MH
看成:
L1/L2 epistemic cache.
把:
MC
看成:
cold provenance store.
Oracle則是:
external reconstruction.
所以 representation preservation 不再是:
存或不存。
而是:
在哪一層存?
13. Finite Grid 的六種 Optimal Architecture
本輪 parameter grid:
- 5 種 cold-storage prices;
- 3 種 cold access costs;
- 5 種 oracle costs;
共:
75
個 cells。
出現六種 optimal architecture families:
H4−C4−O
H4−C6−O
H4−C8−C
H6−C6−O
H6−C8−C
H8−C8−H.
其中最後字母表示 unknown-support worst-case tier:
- H:Hot;
- C:Cold;
- O:Oracle。
14. Architecture Family Interpretation
H4-C4-O
完全依賴 Oracle。
適合:
λO
極低。
H4-C6-O
known-support distinctions放 Cold。
unknown future仍靠 Oracle。
H4-C8-C
Universal Cold Insurance。
所有 unknown future至少可從 Cold恢復。
H6-C6-O
known support直接 Hot。
unknown future仍靠 Oracle。
H6-C8-C
known support Hot,unknown reserve Cold。
H8-C8-H
全部 Hot。
15. Oracle Price Phase Diagram
固定:
ν=0.10,
ηC=0.25,
λC=1.
掃:
λO.
得到三個 canonical regimes。
16. Cheap Oracle
若:
λO<2,
最佳:
H4−C4.
不值得保存 cold backing。
17. Intermediate Oracle
若:
2<λO<6,
最佳:
H4−C6.
也就是:
先把 known-support recoverability放進 Cold,但未知 future仍願意交給 Oracle。
18. Expensive Oracle
若:
λO>6,
最佳:
H4−C8.
此時 universal Cold insurance比 external reconstruction便宜。
19. Oracle Escalation Sequence
所以:
H4C4→H4C6→H4C8
隨:
λO↑.
這是一個非常自然的 insurance ladder:
- Oracle便宜:不備份;
- Oracle變貴:先備份已知 future distinctions;
- Oracle更貴:連 unknown-unknown distinctions也 cold insure。
20. Cold Storage Price Phase Diagram
固定:
ν=0.10,
λC=1,
λO=20.
掃:
ηC.
得到:
Cheap Cold
ηC<0.75
最佳:
H4−C8.
21. Intermediate Cold Price
若:
0.75<ηC<0.95,
最佳:
H6−C8.
也就是:
Cold開始變貴後,值得把 known-support distinctions提前搬到 Hot,只把 unknown reserve留 Cold。
這是一個非常清楚的:
Hot Promotion Phase.
22. Expensive Cold
若:
ηC>0.95,
canonical optimizer選:
H6−C6.
也就是取消 cold extension,unknown future改交 Oracle。
在這個特定 slice:
H8−C8
具有相同 total cost:
4.
所以:
ηC>0.95
實際上存在:
known-hot + oracle 與 universal-hot 之間的 cost tie。
本 runtime以較小 Hot class count作 deterministic tie-break。
23. Cold-Tier Phase Sequence
因此這條 slice:
H4C8→H6C8→H6C6/H8C8.
Cold storage越貴:
- 先把 frequently needed distinctions升 Hot;
- 再取消 Cold reserve。
這和真實 cache hierarchy直覺完全一致。
24. Unknown-Support Mass 的驚人 Threshold
固定:
ηC=0.10,
λC=1,
λO=20.
比較:
H4−C6
與:
H4−C8.
25. H4-C6 Cost
storage:
0.2.
known future只有:
5/9
需要 Cold:
95(1−ν).
unknown novelty走 Oracle:
20ν.
所以:
J46=0.2+95(1−ν)+20ν.
26. H4-C8 Cost
storage:
0.4.
known:
95(1−ν)
走 Cold。
novelty也只走 Cold:
ν.
所以:
J48=0.4+95(1−ν)+ν.
27. Universal Cold Insurance Threshold
令:
J46=J48.
known項消掉:
0.2+20ν=0.4+ν.
所以:
19ν=0.2.
得到:
ν∗=951≈0.0105263.
也就是:
1.0526%
的 unknown-support mass。
28. 只要約 1% Unknown Mass 就值得 Universal Cold
在這個 parameter slice:
ν<1/95
時:
H4−C6
較便宜。
但:
ν>1/95
後:
H4−C8
立刻較便宜。
這是一個很強的結果:
當 Oracle相對 Cold 足夠昂貴時,unknown-unknown probability甚至不需要很高;約百分之一就足以讓 universal cold provenance成為 rational architecture。
29. Unknown-Unknown Insurance 並不要求 High Probability
這直接修正一個可能的直覺:
「未知事件很少,所以不值得保存。」
真正判斷是:
ν×(λO−λC)
是否大於額外 cold storage premium。
所以:
rare×expensive failure
仍然可以非常值得保險。
30. Three-Way Placement Problem
現在每個 distinction不再只有:
{keep,delete}.
而是至少:
{Hot,Cold,Oracle-only}.
所以 recoverability architecture本質上是:
placement problem.
31. Distinction Temperature
可以定義 distinction:
d
的 storage temperature:
T(d)∈{H,C,O}.
高-frequency / high-latency-sensitive distinctions:
T(d)=H.
rare but catastrophic-to-lose distinctions:
T(d)=C.
cheaply reobservable distinctions:
T(d)=O.
32. Hotness 不等於 Importance
一個非常重要的觀察:
Cold=不重要.
某 distinction可能:
- 幾乎永遠不用;
- 但一旦 future需要,Oracle代價極高或根本不可重建。
這種 distinction:
低頻但高 recoverability value.
最適合 Cold,而不是 Hot 或 Delete。
33. Cold Provenance 的真正角色
因此 Cold tier不是一般 cache miss optimization而已。
它其實是:
Distinction Insurance Reserve.
主要目標不是讓普通 query更快。
而是:
防止罕見、未知、未來 cross-cut requirement讓系統永遠無法恢復某個 distinction。
34. External Oracle 的語義
Oracle可以代表:
- raw observation archive;
- external database;
- user重新提供;
- environment重新觀測;
- expensive recomputation;
- simulation replay;
- generative reconstruction;
- other agents。
所以:
λO
不只代表 latency。
也可以包含:
- money;
- energy;
- irreversibility risk;
- privacy;
- availability;
- uncertainty。
35. Oracle 可以是無限成本
若某 distinction來自:
- one-shot event;
- 已消失 historical state;
- private interaction;
- 不可重現實驗;
則:
λO=∞.
此時只要:
ν>0
且 Cold足以 universal recover,
architecture就會強烈偏向:
MC=atomic backing.
36. Multi-Tier Recoverability Principle
因此可以提出:
Multi-Tier Recoverability Principle.
如果 universal recoverability的 Hot storage太昂貴,
但 destructive deletion風險不可接受,
則:
不必在 active/hot layer保留所有 distinctions;可以將低-frequency、high-future-value distinctions下沉至較便宜的 reversible backing tier。
形式:
active complexity<hot backing complexity≤cold backing complexity≤universal distinction space.
37. Surface Compression 與 Insurance Depth
現在 representation system至少有兩個不同 size:
∣P0∣
與:
∣MC∣.
所以不能只報:
model被壓成 4 classes。
還要問:
Cold provenance保留到幾 classes?
一個:
P4/H4/C8
系統表面非常精簡,
但仍有 full recoverability insurance。
38. Recoverability Latency Spectrum
未來需求:
Q
不再只是:
recoverable / unrecoverable.
而是:
hot-recoverable<cold-recoverable<oracle-recoverable<irrecoverable.
因此 recoverability本身有 latency/cost spectrum。
39. Recoverability Quality Vector
可定義:
R=(pH,pC,pO,p∞)
描述 future requirement落在哪個 recovery tier的風險分布。
本輪 fixed finite oracle model:
p∞=0.
後續可以加入 oracle failure。
40. Architecture 不只由 Probability 決定
本輪 grid顯示同樣:
ν=0.10
可以得到:
H4C4,H4C6,H4C8,H6C6,H6C8,H8C8.
所以:
future risk distribution
不是唯一決定 architecture 的因素。
還需要:
(ηH,ηC,λC,λO).
41. Storage Economics 是 Epistemic Architecture 的一部分
這也是 ESC 從 pure representation theory走到 engineering的重要一步。
同一個 epistemic guarantee:
universal recoverability
可以由:
H8C8
或:
H4C8
提供。
兩者 epistemic guarantee相同,
但:
- hot complexity;
- latency;
- storage economics;
完全不同。
所以:
same recoverability guarantee=same architecture.
42. Recoverability IR
這又回到 EXP-14 的 effect/realization separation。
高層 contract可以只聲明:
unknown-support future must remain recoverable.
底層 planner再選:
H8C8,H6C8,H4C8,
甚至:
H4C6+O
等不同 physical realizations。
所以:
Recoverability Contract→Tier Placement Plan.
43. 這與真實 AI Memory 很接近
Agent memory不應只有:
short-term vs long-term。
更精確可以是:
Active / Working Representation
目前 reasoning直接使用。
Hot Recoverability Memory
低 latency latent detail。
Cold Provenance Memory
較慢,但保留 reconstruction fidelity。
External World / Archive
必要時重新取得。
這比單純 vector DB / context window 二分更完整。
44. Model Compression 也一樣
對 model representation:
- Hot:runtime weights / active latent basis;
- Cold:residual adapters / reversible code / compressed provenance;
- Oracle:original checkpoint / retraining data / external teacher。
所以:
quantization
與:
recoverability insurance
可以被同一框架分析。
45. Database / Storage 也一樣
Hot:
materialized current schema.
Cold:
lossless historical/provenance archive.
Oracle:
external source or recomputation.
因此 ESC multi-tier architecture不侷限 AI。
46. 本輪的主要工程訊息
如果你知道:
- Hot 很貴;
- Cold 很便宜;
- Oracle 很貴;
- unknown future probability即使只有幾個百分點;
那一個非常合理的 architecture不是:
全部 Hot
也不是:
全部刪掉.
而是:
coarse Hot + fine Cold.
這正是本輪 finite optimizer最常選出的 family。
47. 本輪錨點
ESC-EXP-24.Auniversal recoverability 不要求 universal hot representation。
ESC-EXP-24.Brecoverability architecture 是 Hot / Cold / Oracle 的 distinction-placement 問題。
ESC-EXP-24.CλO:H4C4→H4C6→H4C8
在 canonical slice 中的 breakpoints 為:
2,6.
ESC-EXP-24.DηC:H4C8→H6C8→H6C6/H8C8
breakpoints:
0.75,0.95.
ESC-EXP-24.Eν∗=1/95≈1.0526%
在 canonical novelty slice 中已足以讓 universal cold insurance取代 6-class cold + oracle。
48. 從 EXP-23 到 EXP-24
EXP-23 問:
unknown-unknown future存在時,要不要保存 universal backing?
EXP-24 的答案變成:
不只是要不要保存,而是保存在哪一層。
所以:
Recoverability
從 binary property:
{yes,no}
正式變成:
tiered resource allocation problem.
49. 下一輪:ESC-EXP-25
EXP-24 仍然把 Cold tier視為:
完整 partition backing.
但真實系統裡 Cold provenance未必需要直接保存所有 atomic states。
它可能只保存:
- residual bits;
- reconstruction code;
- provenance graph;
- reversible transform;
- sufficient seed;
- external references。
所以真正下一步應該是:
Minimal Provenance Coding for Recoverability.
也就是問:
要讓 Hot 4-class representation未來可恢復成 8-class universal backing,Cold tier最少到底要存多少資訊,而不是存多少 partition blocks?
這會把目前粗略的:
∣MC∣−∣MH∣
storage proxy,
升級成真正的:
minimum recoverability code length.
可以開始研究:
- conditional entropy of backing residual;
- provenance code;
- reversible residual channel;
- minimal sufficient reconstruction key;
- compression of the recovery layer itself。
這會直接把 ESC 接回 EXP-06~12 的 bridge-cost / information-theoretic line,形成一個完整閉環。