摘要: 1.基于能量的模型(Energy-Based Models,EBM)基于能量的模型(EBM)把我们所关心变量的各种组合和一个标量能量联系在一起。我们训练模型的过程就是不断改变标量能量的过程,因此就有了数学上期望的意义。比如,如果一个变量组合被认为是合理的,它同时也具有较小的能量。基于能量的概率模型通过能量函数来定义概率分布:(1)其中,正则化因子Z被称为配分函数:EBM可以通过对原始数据的负对数似然函数来运用梯度下降来完成训练。我们的过程也可以分为两步:1定义对数似然函数;2.定义损失函数。对数似然函数:损失函数就是负对数似然函数:2.含有隐含层的EBM在许多情况下,我们无法观察到样品的所有参 阅读全文
posted @ 2014-03-29 20:53 I know you 阅读(3070) 评论(0) 推荐(0) 编辑