diff --git a/机器学习算法理论及应用/李航——统计学习方法/6.逻辑斯蒂回归与最大熵.md b/机器学习算法理论及应用/李航——统计学习方法/6.逻辑斯蒂回归与最大熵.md index f84fbca..ea19eb6 100644 --- a/机器学习算法理论及应用/李航——统计学习方法/6.逻辑斯蒂回归与最大熵.md +++ b/机器学习算法理论及应用/李航——统计学习方法/6.逻辑斯蒂回归与最大熵.md @@ -212,3 +212,17 @@ min ![1619103949860](assets/1619103949860.png) + + +### 总结 + +Summarization + +1. 最大熵强调不提任何假设,以熵最大为目标。 + +2. 将终极目标代入熵的公式后,将其最大化。 + +3. 在训练集中寻找现有的约束,计算期望,将其作为约束。 + + 使用拉格朗日乘子发得到P(y|x),之后使用优化算法得到P(y|x)中的参数w。 +