的结果(一个张量)作为一个操作数传递给另一项操作。可以使用TensorBoard直观地呈现图。
H
启发法(heuristic)
一种非最优但实用的问题解决方案,足以用于进行改进或从中学习。
隐藏层(hidden layer)
神经网络中的合成层,介于输入层(特征)和输出层(预测)之间。神经网络包含一个或多个隐藏层。
合页损失函数(hinge loss)
一系列用于分类的损失函数,旨在找到距离每个训练样本都尽可能远的决策边界,从而使样本和边界之间的裕度最大化。KSVM使用合页损失函数(或相关函数,例如平方合页损失函数)。对于二元分类,合页损失函数的定义如下:
$$
\scriptstyle \mathrm { l o s s = m a x } ( 0 , 1 - ( \mathbf { y } ^ { \prime * } \mathbf { y } ) )
$$
其中“y”表示分类器模型的原始输出:
$$
\mathbf { y } ^ { \prime } { = } \mathbf { b } { + } \mathbf { w } _ { 1 } \mathbf { x } _ { 1 } { + } \mathbf { w } _ { 2 } \mathbf { x } _ { 2 } { + } \ldots { + } \mathbf { w } _ { \mathrm { n } } \mathbf { x } _ { \mathrm { n } }
$$
“y”表示真标签,值为-1或+1。
维持数据(holdout data)
训练期间故意不使用(“维持”)的样本。验证数据集和测试数据集都属于维持数据。维持数据有助于评估模型向训练时所用数据之外的数据进行泛化的能力。与基于训练数据集的损失相比,基于维持数据集的损失有助于更好地估算基于未见过的数据集的损失。
超参数(hyperparameter)
在模型训练的连续过程中,您调节的“旋钮”。例如,学习速率就是一种超参数。与参数相对。
超平面(hyperplane)
将一个空间划分为两个子空间的边界。例如,在二维空间中,直线就是一个超平面,在三维空间中,平面则是一个超平面。在机器学习中更典型的是,超平面是分隔高维度空间的边界。核支持向量机利用超平面将正类别和负类别区分开来(通常在极高维度空间中)。
人工智能与大数据技术导论
456