损失函数：参数的真值为（θ），决策的结果为d ，两者的不一致会带来一定的损失，这种损失是一个随机变量，用L(θ,d)表示，称为损失函数。

常见的损失函数有L(θ,d) = c(θ − d)²(称为二次损失函数）和L(θ,d) = c | θ − d | （称为绝对损失函数）。