20260625:很多新内容

This commit is contained in:
2026-06-25 14:08:47 +08:00
parent 91fac5b6fc
commit 6021dea160
375 changed files with 19263 additions and 251 deletions

View File

@@ -0,0 +1,50 @@
---
title: "Review: Gan Bifurcation EoS"
created: 2026-06-23
type: review
paper: gan-bifurcation-eos
---
# Review: A Bifurcation Theory Framework for Gradient Descent on the Edge of Stability
📌 **基本信息**
- 论文A Bifurcation Theory Framework for Gradient Descent on the Edge of Stability
- 作者Eric Gan (Independent Researcher)
- 领域cs.LG
- arXiv2606.15551v1
- 添加时间2026-06-23
🎯 **核心概念**
1. **[[edge-of-stability|Edge of Stability]]** — 梯度下降在 sharpness 超过 2/η 时仍稳定训练的深度学习中反直觉现象
2. **[[flip-bifurcation|Flip 分岔]]** — Jacobian 临界特征值 λ = -1 时触发的倍周期分岔EoS 振荡的数学根源
3. **[[first-lyapunov-coefficient|第一 Lyapunov 系数]]** — 决定 flip 分岔超临界/亚临界性质的标量判据c₁ > 0 保证稳定
4. **[[manifold-of-minimizers|极小值流形]]** — 过参数化网络损失景观中连续全局极小集的几何结构
5. **[[normal-tangent-decomposition|法向-切向分解]]** — 将 GD 动力学沿 M 分解为法向振荡 + 切向漂移
6. **[[sharpness|Sharpness]]** — Hessian 最大特征值EoS 训练中在 2/η 阈值附近振荡
7. **[[product-stability|乘积稳定性]]** — Gan (2026) 的标量条件,被证明是 flip 分岔 c₁ > 0 的特例
8. **[[center-manifold-theorem|中心流形定理]]** — 将高维动力学约化到临界子空间的分岔理论工具
🔗 **概念网络**
- **核心连接**edge-of-stability ↔ flip-bifurcation ↔ first-lyapunov-coefficient → 稳定性判据链
- **几何维度**manifold-of-minimizers ↔ normal-tangent-decomposition → 分解框架
- **历史统一**product-stability → first-lyapunov-coefficient → gan-bifurcation-eos → 极简分析归入一般框架
- **工具链**center-manifold-theorem → flip-bifurcation → first-lyapunov-coefficient → sharpness
**新增概念**8 个(全部新建,为 wiki 的全新子领域)
**复用已有概念**0该领域在 wiki 中此前完全空白)
📚 **Wiki 集成**
- 新增页面10 个1 论文 + 8 概念 + 1 Review
- 链接密度:核心概念平均 5+ 个交叉引用
- 总规模:前 → 后(待 index 更新后确认)
💡 **关键洞察**
1. **从"稳定性条件"到"稳定性机制"的范式升级**:以往 EoS 分析关注 *是否* 收敛,本文揭示了 *为何* 收敛——flip 分岔提供法向稳定sharpness 梯度驱动力提供切向收敛
2. **过参数化的几何特征被首次系统融入 EoS 理论**:极小值流形不是 EoS 分析的障碍,而是产生切向漂移的根源——这一视角解释了为什么过参数化网络天然适合 EoS 训练
3. **统一性贡献**:乘积稳定性 (Gan 2026) 作为本框架特例被证明,意味着极简分析和一般框架走到了同一条路上