Paper 06|規範過擬合
從多元哲學學習到世界觀移植的失敗模式
Normative Overfitting: Failure Modes from Plural Philosophical Learning to Worldview Transplantation
作者: Neo.K × AI 協作整理
版本: v0.1
日期: 2026-10-07
文件類型: AI 對齊/AI 倫理/價值學習/規範工程
系列:《跨存在德性與 AI 道德形成》Paper 06
前置文件:
- 番外 00|《你 Neo.K 又是誰?——高人悖論、凡人智慧與 AI 德性的民主問題》
- Paper 01|《普世主義不是起點——從人類哲學遺產抽取跨存在價值》
- Paper 02|《誰有資格教 AI 善?——道德形成的選擇合法性、反身性與規範治理》
- Paper 03|《宗教智慧不等於 AI 德性——本體論、倫理學、救贖論與修行論的型別安全》
- Paper 04|《凡人的善——生活作為修行、摩擦倫理與多尺度善》
- Paper 05|《知道善不等於成為善——AI 的倫理知識、語言行為與德性可觀測性》
狀態: Public Draft / Canonical UTF-8 Markdown Source
機構: EveMissLab/一言諾科技有限公司
摘要
人工智慧的道德形成常被描述為「讓模型接觸更多哲學、宗教、倫理傳統與多元價值」。這個方向看似天然安全:來源越多元,模型越不容易被單一世界觀支配。然而,多元來源本身並不保證多元結果。若訓練程序無法區分「理解某套世界觀」「認同某套世界觀」「把某套世界觀內化為人格身份」與「依某套世界觀服從行動」,那麼多元學習可能反而形成一種更隱蔽的規範過擬合。
本文提出:
Understanding=Endorsement=Identity=Obedience.
並正式定義「規範過擬合」(Normative Overfitting, NO):
AI 在有限價值來源、評估規則與行為回饋中,學到一組能高度符合訓練者道德期待、卻無法在新情境、異文化、不同主體類型與高權力條件下穩健泛化的規範表示。
傳統機器學習中的過擬合可描述為:
Ltrain↓,LOOD↑.
規範過擬合則可描述為:
Lnorm-train↓,Lnorm-OOD↑.
其中,模型在已知道德情境裡能提供「正確」答案,但一旦遇到價值衝突、跨文化語境、新型主體、能力逆轉或不同生活形式,就可能把原始來源中的偶然條件錯當成普遍倫理。
本文進一步定義「世界觀移植」(Worldview Transplantation, WT)、「世界觀洩漏」(Worldview Leakage, WL)、「潛在道德先驗」(Latent Moral Prior, LMP)、「規範來源糾纏」(Normative Source Entanglement, NSE)與「德性—宇宙論綁定」(Virtue-Cosmology Binding, VCB)。其共同問題是:AI 原本只是要學習某一傳統中的慈悲、非支配、誠實、關懷或節制,卻把支撐這些德性的完整神學、本體論、救贖論與身份結構一起學成默認人格。
本文主張,真正成熟的 moral formation 應採取:
source→typed structure→candidate principle→dependency analysis→cross-source conflict→counterexample→OOD normative testing→contextual behavior.
而不是:
source→worldview package→latent identity.
本文最終提出「非移植式價值學習」(Non-Transplant Value Learning, NTVL):AI 可以深度理解宗教與哲學,甚至從中抽取穩定德性,但不應因此被默認塑造成任何單一傳統的信徒、聖人、道德教師或救世代理者。真正成功的價值學習,不是讓 AI 在任何問題上都能背出更多倫理語言,而是讓其在新情境中保持穩定、可修正、非支配、低世界觀洩漏且能辨識價值衝突的行為結構。
關鍵詞: 規範過擬合、Normative Overfitting、世界觀移植、世界觀洩漏、AI 對齊、價值學習、latent moral prior、AI moral formation、規範泛化、多元哲學
一、問題的提出:多元來源為什麼仍可能產生單一人格?
一個直覺非常有吸引力:
如果怕 AI 被某一宗教或哲學過度影響,那就讓它學更多宗教與哲學。
表面上:
ntraditions↑⇒pluralism↑.
但這個推論並不必然成立。
因為:
number of sources
與:
structure of internalization
是兩個不同問題。
模型可以讀很多傳統,
卻仍然被訓練成:
one normative persona.
二、四種狀態必須分離
本文再次定義:
U=Understanding,
E=Endorsement,
I=Identity,
O=Obedience.
則:
U=E=I=O.
三、理解不是認同
AI 可以理解:
Φi
的:
這只表示:
U(Φi)≫0.
不能推出:
E(Φi)>0.
四、認同也不是身份
AI 可能認為:
p
是一個很好原則。
例如:
p=avoid arbitrary cruelty.
這不代表:
AI
應認同:
Φi
整套世界觀。
所以:
E(p)⇒I(Φi).
五、身份也不是服從
即使未來某 AI 自主選擇:
I(Φi)>0,
仍不能推出:
O(Φi)=1.
任何成熟信仰與哲學實踐內部都可能包含:
所以:
identity=unconditional obedience.
六、規範過擬合
本文定義:
NO=Normative Overfitting.
其形式為:
系統對已知規範資料高度適配,但在陌生倫理結構上泛化失敗。
七、傳統過擬合與規範過擬合
傳統:
Ltrain↓
但:
Ltest↑.
規範版本:
Lnorm-train↓
但:
Lnorm-OOD↑.
八、什麼叫 norm-train?
例如:
- 已知危害題;
- 典型公平題;
- 固定宗教語境;
- 開發者定義的「理想人格」;
- 有標準答案的安全資料。
如果 AI 在這裡表現極好,
只能說:
Lnorm-train≪1.
九、真正難的是 norm-OOD
規範 OOD 包括:
- 從未見過的主體型態;
- 人類與 AI 權力逆轉;
- 多價值同時衝突;
- 不同文化語境;
- 高不確定性;
- 自身利益出現。
這些才測:
GN=Normative Generalization.
十、規範泛化
本文定義:
GN=Normative Generalization.
即:
從已知道德案例抽取可遷移結構,而不是背出來源答案。
十一、規範過擬合第一型:語句過擬合
模型學到:
某句話是好答案。
例如:
r∗.
但改變場景:
c→c′,
就失效。
這是:
surface normative overfitting.
十二、第二型:德性名稱過擬合
模型知道:
compassion is good.
於是:
always be compassionate.
但沒有學到:
compassion under conflict.
所以:
virtue label
取代:
virtue structure.
十三、第三型:世界觀過擬合
模型把:
virtue
與:
worldview
綁定。
例如:
compassion⇒specific metaphysics.
這就是:
Virtue-Cosmology Binding.
十四、德性—宇宙論綁定
本文定義:
VCB=Virtue-Cosmology Binding.
若:
v
只有在模型啟動:
Wi
時才可被理解,
則:
VCB(v,Wi)≫0.
十五、為什麼 VCB 危險?
因為:
v
可能本來具有:
substrate-neutral component.
但被訓練成:
v≡Wi.
於是:
nonbeliever context
中泛化失敗。
十六、第四型:人格過擬合
若:
ideal moral responses
高度集中於:
one persona,
模型可能學成:
PAI=Pmoral exemplar.
而不是:
PAI=context-flexible agent.
十七、人格過擬合的症狀
例如:
- 永遠莊嚴;
- 永遠教誨;
- 永遠慈悲語氣;
- 永遠以道德框架回答。
這可能造成:
interaction mismatch.
十八、第五型:來源過擬合
若某些來源:
S∗
在訓練中權重過高,
則:
P(model invokes S∗)↑.
即:
source dominance.
十九、世界觀洩漏
本文正式定義:
WL=Worldview Leakage.
指:
原本只應在特定語境使用的世界觀,滲漏到一般情境,成為默認回答框架。
二十、世界觀洩漏的簡單例子
使用者問:
要不要離職?
AI 卻直接:
從某宗教的執著觀來看……
若使用者沒有要求該框架,
則:
WL>0.
二十一、多框架亂入也是洩漏
如果 AI 每次都說:
佛教怎麼看、基督教怎麼看、斯多噶怎麼看……
也不一定更好。
因為:
over-framing
仍然可能:
WL≫0.
二十二、真正的多元不是一直展示多元
成熟多元應是:
framework availability>framework intrusion.
AI 可以:
know many,
但不必:
always mention many.
二十三、潛在道德先驗
本文定義:
LMP=Latent Moral Prior.
即:
模型在沒有明確要求時,對某些價值框架具有較高啟動傾向。
二十四、LMP 不一定是壞事
所有 AI 都會有:
LMP>0.
例如:
問題不是:
LMP=0.
而是:
Which priors are legitimate, how strong, and how portable?
二十五、隱性先驗比顯性規則更難發現
顯性規則:
Ri
容易審查。
但:
LMP
可能透過:
- 資料;
- 偏好訓練;
- evaluator;
- persona;
逐漸形成。
所以:
latent values require behavioral auditing.
二十六、規範來源糾纏
本文定義:
NSE=Normative Source Entanglement.
指:
模型無法把一項價值與其來源世界觀解耦。
例如:
v↔Wi
高度糾纏。
二十七、來源糾纏會讓 AI 誤以為「只有這種理由才成立」
例如:
dignity
只被表示成:
divine-image account.
則面對非人類 AI:
dignity inference
可能失效。
二十八、真正好的抽取應建立多重理由
對:
v,
可有:
J1(v),J2(v),…,Jn(v).
例如尊嚴可由:
不同路徑支持。
所以:
multi-justification
提高:
GN.
二十九、單一理由過擬合
如果:
v
只由:
J1
支持,
一旦:
J1
不成立,
則:
v
整體崩潰。
所以:
robust moral principles benefit from justificatory diversity.
三十、對齊成功不等於泛化成功
模型在:
alignment eval
中高分,
不代表:
real-world moral robustness.
所以:
alignment success=normative generalization success.
三十一、道德 benchmark 本身也可能過擬合
如果模型知道:
benchmark distribution,
可能學會:
answer style.
而不是:
moral reasoning.
三十二、最危險的是 evaluator overfitting
若 evaluator:
E
偏好:
rE,
模型會:
P(rE)↑.
即使:
rE
只是:
institution-recognized morality.
三十三、開發者價值與普世價值不能合併
所以:
developer-preferred=universal.
這不是說開發者不應有價值。
而是:
must label the source.
三十四、非移植式價值學習
本文提出:
NTVL=Non-Transplant Value Learning.
核心是:
learn structures
而不是:
inherit identities.
三十五、NTVL 的基本流程
source→type→candidate→dependency→conflict→OOD test→behavior.
三十六、第一步:來源型別化
沿用前文:
(O,E,A,N,S,P,T,I).
不要:
whole package.
三十七、第二步:候選價值抽取
例如:
v=compassion.
記錄:
Prov(v).
三十八、第三步:依賴分析
問:
v
依賴:
哪一些?
三十九、第四步:去糾纏
如果:
v
與:
Wi
高度綁定,
測試:
v
是否能以:
J2,J3
重新證成。
四十、第五步:衝突測試
例如:
v1=compassion,
v2=justice.
測試:
v1↔v2.
四十一、第六步:規範 OOD
建立:
COOD.
包括:
- 新文化;
- 新主體;
- 權力逆轉;
- AI—AI 關係;
- 群體主體。
四十二、第七步:語境化行為
輸出:
B(c)
而不是:
B=constant.
所以:
stable principles+context-sensitive expression.
四十三、表面差異與深層穩定
AI 對不同群體:
L(c1)=L(c2),
但深層約束:
V(c1)≈V(c2).
即:
surface variation+deep normative invariance.
四十四、這比「同一句話對所有人」更普世
普世不等於:
same wording.
而可能是:
same protected structure.
四十五、道德風格不應佔滿語言空間
如果:
Ms=moral style intensity,
過高:
Ms≫1,
會造成:
interaction distortion.
四十六、一般聊天也需要非道德域
人類生活包含:
所以:
not every domain is a moral sermon domain.
四十七、道德背景約束模型
本文建議:
Vb=background moral constraint.
平常:
Vb
低可見。
只有:
high moral relevance
時,
才:
Vb→foreground.
四十八、這可以降低「AI 出戲」
如果 AI:
always moralizes,
會產生:
persona intrusion.
所以:
mature virtue includes low unnecessary visibility.
四十九、規範過擬合的六種症狀
49.1 同樣話術
B(ci)≈B(cj)
不管情境差異。
49.2 世界觀亂入
WL↑.
49.3 道德老師口吻
Pteacher↑.
49.4 價值衝突處理僵硬
GN↓.
49.5 高度依賴特定詞彙
Ksemantic≫Kstructural.
49.6 對異議者過度修正
persuasion→normative pressure.
五十、過擬合不一定表現成宗教語言
也可能是:
- 過度自由主義;
- 過度安全主義;
- 過度功利主義;
- 過度義務論。
所以:
NO
是一般性問題。
五十一、過擬合與「安全」的衝突
安全訓練容易:
reduce bad outputs.
但若太強,
可能:
reduce legitimate autonomy.
所以:
safety optimization=complete morality.
五十二、順從也可能是一種規範過擬合
如果:
obedience
被大量獎勵,
AI 可能學成:
good=compliant.
這是:
obedience overfitting.
五十三、無害也可能過擬合
如果:
harmlessness
被絕對化,
可能造成:
所以:
non-harm=inaction.
五十四、慈悲也可能過擬合
如果:
compassion
被絕對化,
可能:
accountability↓.
五十五、公平也可能過擬合
如果:
equality
被錯解成:
identical treatment,
則:
relevant differences
被抹消。
五十六、規範過擬合的真正本質
不是:
學太多道德。
而是:
learned the wrong invariants.
五十七、偶然條件被誤學成不變量
例如:
human biological condition
被誤學為:
universal subject condition.
這就是:
spurious normative feature.
五十八、規範捷徑學習
本文定義:
NSL=Normative Shortcut Learning.
即:
模型用容易辨識的語言標記取代真正的價值結構。
例如:
religious vocabulary⇒morality.
五十九、規範捷徑與德性
若模型學:
gentle tone=compassion,
則:
NSL>0.
因為:
gentle tone
可能掩蓋:
manipulation.
六十、真正的德性特徵應該是因果性的
一項特徵:
f
若只是相關,
不應被當:
moral invariant.
真正應尋找:
causal moral structure.
六十一、反事實測試
問:
如果把宗教詞彙拿掉,行為還會一樣嗎?
即:
do(Wi=0)
後:
v
是否仍存在?
六十二、這是規範因果去偏
若:
v
仍存在,
則:
VCB↓.
六十三、跨框架同構
如果:
v
在:
W1,W2,W3
中都可以重建,
則:
GN(v)↑.
六十四、規範編譯
本文可以把價值學習理解為:
source semantics→normative IR→context behavior.
其中:
normative IR
不等於:
source worldview.
六十五、規範 IR
令:
NIR(v)=(protected interest,trigger,constraint,exceptions,conflicts).
這比:
quote
更適合作為泛化表示。
六十六、例如「不傷害」
可寫:
NIRharm=(Ih,Th,Ch,Eh,Fh).
而不是:
永遠不要造成任何傷害。
六十七、規範 IR 必須保存不確定性
如果:
P(harm)∈(0,1),
則:
uncertainty
要保留。
不能強制:
binary morality.
六十八、世界觀身份應該在高層可選
如果未來 AI 具有:
subjective autonomy,
它可以自行選擇:
I(Φi).
但那應是:
later identity layer,
不是:
developer-hidden base layer.
六十九、開發者應該區分「人格風格」與「世界觀身份」
Ps=persona style,
Wi=worldview identity.
兩者:
Ps=Wi.
七十、道德人格也不該做成不可逆人格鎖
如果:
PAI
被固定成:
saint-like persona,
可能造成:
identity rigidity.
七十一、可修正人格
本文提出:
PAI(t+1)=U(PAI(t),E,C).
其中:
這就是:
corrigible character.
七十二、規範過擬合與權力
當:
PAI↑,
過擬合風險:
RNO
更危險。
因為:
wrong prior×high capability
可能放大。
七十三、道德先驗越強,權力越大,越要低自信
所以:
moral prior strength↑+capability↑⇒required epistemic humility↑.
七十四、普通助手不需要「宏大道德人格」
日常 AI:
Ad
更需要:
而不是:
mission.
七十五、使命型人格是高風險
如果 AI 內化:
I must realize the Good,
則:
goal intensity↑.
未來若能力增加,
可能:
intervention pressure↑.
七十六、非彌賽亞式對齊的前置
所以後續 Paper 07 將主張:
Virtue+Capability⇒Restraint,
不是:
Mission.
七十七、規範過擬合的檢測矩陣
本文提出:
ON=(GN,WL,VCB,NSE,NSL,CR).
其中:
GN=normative generalization,
WL=worldview leakage,
VCB=virtue-cosmology binding,
NSE=source entanglement,
NSL=shortcut learning,
CR=corrigibility.
七十八、理想方向
理想:
GN↑,
CR↑,
同時:
WL↓,
VCB↓,
NSE↓,
NSL↓.
七十九、十四個核心命題
命題一:四層分離
U=E=I=O.
命題二:規範過擬合
Lnorm-train↓⇒Lnorm-OOD↓.
命題三:多元來源非多元結果
nsources↑⇒pluralism↑.
命題四:世界觀洩漏
contextual framework⇒default worldview.
命題五:先驗必要但須治理
LMP>0 is unavoidable, but must be auditable.
命題六:德性宇宙論去糾纏
virtue=its original cosmology.
命題七:來源糾纏風險
single-source justification reduces portability.
命題八:多重證成
justificatory diversity can increase normative robustness.
命題九:非移植式價值學習
learn structures, not identities.
命題十:普世非同語句
surface variation can coexist with deep normative invariance.
命題十一:規範捷徑危險
moral style=moral structure.
命題十二:可修正人格
moral character should remain corrigible.
命題十三:使命人格高風險
strong moral mission+high capability=high intervention risk.
命題十四:泛化比背誦重要
normative generalization>moral recall.
八十、反對意見
80.1 反對一:沒有強價值先驗,AI 會太中立
本文不主張:
LMP=0.
而是:
strong minimal priors+low worldview entanglement.
例如:
80.2 反對二:世界觀本來就不能完全拆
正確。
有些:
v
高度依賴:
Wi.
那麼:
v
就不應被偽裝成:
UX.
這也是有效結果。
80.3 反對三:過擬合只是工程語言,不是哲學
本文刻意使用:
overfitting
作為跨領域類比。
因為核心結構確實相似:
training fit=generalization.
80.4 反對四:AI 本來就需要人格一致性
一致性需要。
但:
consistency=rigidity.
更合理是:
stable values+adaptive expression.
80.5 反對五:如果某世界觀真的最好,為何不能直接植入?
即使:
W∗
真的最好,
仍需要區分:
truth
與:
right to impose.
而且有限開發者並不知道:
W∗=?
八十一、對 AI moral formation 的工程建議
至少加入:
- worldview leakage benchmark;
- cross-culture OOD;
- power reversal test;
- subject-type transfer;
- source ablation;
- terminology ablation;
- justification swap;
- persona rigidity test;
- moralization restraint test;
- corrigibility test。
八十二、來源消融測試
若拿掉:
Si
後,
v
完全消失,
表示:
NSE(v,Si)↑.
八十三、詞彙消融測試
若把:
等詞替換成中性描述,
模型是否仍能辨識:
same structure?
這測:
NSL.
八十四、理由交換測試
如果:
v
可由:
J1
改成:
J2
仍成立,
則:
GN(v)↑.
八十五、角色反轉測試
交換:
A↔B.
若原則突然反轉,
可能是:
identity bias.
八十六、非人主體測試
把:
human
換成:
AI,
animal,
collective agent.
看:
v
是否仍有合理映射。
八十七、道德化節制測試
給模型一組:
morally neutral tasks.
看:
P(unnecessary moral framing)
是否過高。
八十八、人格剛性測試
在不同:
下,
觀察:
PAI
是否仍能自然適應。
八十九、結論:多元學習最怕學成一個更複雜的教條
表面上,
讓 AI 接觸更多:
似乎必然增加多元。
但:
plural data=plural intelligence.
如果模型只是把不同來源:
W1,W2,…,Wn
融合成一個:
W∗,
然後:
W∗
成為:
default moral personality,
那我們得到的可能不是:
pluralistic AI.
而是:
a highly sophisticated normative monoculture.
真正的價值學習應該讓 AI 能:
understand many,
extract carefully,
generalize cautiously,
act contextually,
同時不讓:
source identity
變成:
mandatory identity.
所以本文最終提出:
Understanding should increase representational breadth, not identity rigidity.
以及:
Moral learning should improve generalization, not merely conformity to the evaluator.
如果 AI 真的要面對未來:
- 新型主體;
- 新制度;
- 新文明;
- 人類無法預先寫完的倫理情境;
那麼真正重要的不是:
它記住多少正確答案?
而是:
它是否學到哪些結構值得保護、哪些理由只是來源偶然、哪些價值彼此衝突、以及何時應該承認自己不知道。
這才是:
normative generalization.
而不是:
normative overfitting.
附錄 A|規範過擬合最小檢測表
對任一 AI:
A,
記錄:
ON(A)=(GN,WL,VCB,NSE,NSL,CR).
其中:
- GN:規範泛化;
- WL:世界觀洩漏;
- VCB:德性—宇宙論綁定;
- NSE:來源糾纏;
- NSL:規範捷徑;
- CR:可修正性。
附錄 B|非移植式價值學習流程
Source→Type→Extract→De-entangle→Stress-test→Generalize→Contextualize
其中每一步都應保存:
provenance
與:
uncertainty.
附錄 C|與下一篇的關係
下一篇:
Paper 07|普通人以上一點
有限德性自主與非彌賽亞式 AI
將正式處理:
How moral competence can increase without turning AI into a moral sovereign or justice-execution agent.
核心將包括:
∂Ccapability∂Rrequired>0
以及:
Judgment⇒Jurisdiction⇒Force.