Mirror Descent 发音 释义 Definition Mirror descent(镜像下降法) 是一类用于凸优化 与在线学习 的迭代算法。它用一个“镜像映射”(通常由某个强凸函数/距离生成函数定义)把更新从“原空间”转到“对偶空间”进行梯度步,再映回原空间,从而能更好地适应约束集合的几何结构(例如在概率单纯形上常用熵型映射)。
发音 Pronunciation (IPA) /mrr dsnt/
词源 Etymology “Mirror”在这里不是指物理镜子,而是比喻:算法先在一个“镜像空间”(对偶空间)里做更新,再“映射”回原变量空间;“descent”表示沿着某种意义下的下降方向迭代以降低目标函数值。该术语在优化与在线凸优化文献中广泛使用。
例句 Examples Mirror descent is useful for optimization on the simplex. 镜像下降法在单纯形上的优化问题中很有用。
Using an entropy-based mirror map, the mirror descent update can outperform Euclidean gradient descent in sparse probability models. 使用基于熵的镜像映射时,镜像下降法在稀疏概率模型中可能优于欧几里得梯度下降。
相关词 Related Words 文学与著作中的用例 Notable Works Nemirovski, A. & Yudin, D. Problem Complexity and Method Efficiency in Optimization (优化经典著作中讨论了相关思想与框架) Beck, A. & Teboulle, M. Mirror Descent and Nonlinear Projected Subgradient Methods for Convex Optimization (论文标题即使用该术语) Hazan, E. Introduction to Online Convex Optimization (在线凸优化教材中系统介绍 mirror descent) Bubeck, S. Convex Optimization: Algorithms and Complexity (讲义/教材中将 mirror descent 作为核心算法之一)