决策树分裂为何只看协方差行列式 |Σ|
固定对准 + 高斯 MLE 后,似然只剩 |Σ| 与占用计数 γ ——「越分越纯」就是「|Σ| 越分越小」
f₁
f₂
|Σ| 大
L 低(又胖又散)
L-Nasal ?
|Σ_y| 小
|Σ_n| 小
两边都更紧 ⟹ L 高
是 (Yes)
否 (No)
L(S) = −½(
log[(2π)ⁿ
|Σ|
] + n)·
Σγ
ΔL =
L_y + L_n
−
L(S)
?
▶ 播放
单步
重置
💡 固定对准、各簇用单高斯做 MLE 后,似然闭式只依赖
|Σ|
与占用计数
γ
;分裂把数据切得更纯 ⟹ 子节点 |Σ| 更小 ⟹
ΔL≥阈值
才接受分裂。