HingeEmbedding损失函数
- 类torch.nn.HingeEmbeddingLoss(margin=1.0, size_average=None, reduce=None, reduction='mean')[源代码]
-
根据输入张量$x$和标签张量$y$(包含1或-1)来计算损失。这通常用于判断两个输入是否相似,例如使用L1成对距离作为$x$,并且常用于学习非线性嵌入或半监督学习。
小批量中第$n$个样本的损失函数为
$l_n = \begin{cases} x_n, & \text{if}\; y_n = 1,\\ \max \{0, margin - x_n\}, & \text{if}\; y_n = -1, \end{cases}$总的损失函数是
$\ell(x, y) = \begin{cases} \operatorname{mean}(L), & \text{if reduction} = \text{`mean';}\\ \operatorname{sum}(L), & \text{if reduction} = \text{`sum'.} \end{cases}$其中 $L = \{l_1, \dots, l_N\}^\top$。
- 参数
-
-
margin (float, 可选) – 默认值为 1。
-
size_average (bool, optional) – 已弃用(请参见
reduction
)。默认情况下,损失值会在批次中的每个损失元素上进行平均计算。需要注意的是,对于某些损失函数,每个样本包含多个损失元素。如果将字段size_average
设置为False
,则损失值会针对每个小批量求和。当reduce
为False
时,此设置会被忽略。默认值:True
-
reduce (bool, optional) – 已弃用(请参见
reduction
)。默认情况下,损失值会根据size_average
参数在每个小批量中进行平均或求和。当reduce
为False
时,返回每批元素的单独损失值,并忽略size_average
设置。默认值:True
-
reduction (str, 可选) – 指定要应用于输出的缩减方式:
'none'
|'mean'
|'sum'
。'none'
: 不进行任何缩减,'mean'
: 输出总和除以元素数量,'sum'
: 对输出求和。注意:size_average
和reduce
正在被弃用,在此期间,指定这两个参数中的任何一个将覆盖reduction
参数。默认值:'mean'
-
- 形状:
-
-
输入: $(*)$,其中$*$表示任意数量的维度。求和操作会针对所有的元素执行。
-
目标: $(*)$,形状与输入相同
-
输出:标量。如果
reduction
是'none'
,则输出形状与输入形状相同。
-