关于监督分类中确定判别函数和判别准则（规则）这个步骤，我产生了一个疑问：什么是判别函数？什么是判别规则？

判别函数

各个类别的判别区域确定后，面对某个特征矢量属于哪个类别这个问题，（我们一般）用一些函数来表示其属于某个类别的情况（如，距类别中心聚合点距离，属于类别的条件概率）。这些函数就称为判别函数。

判别规则

判别函数的作用：单纯去计算某个特征向量在判别函数中的属于不同类别的情况（数值）。计算得到这些值后，我们对该特征矢量属于某类这个问题，就要给出一个判断的依据。（一般来说，是个正常人都会把值最大的那种情况下的类别视作特征向量属于的类别）这种判断的依据就被称为判别规则。

监督法分类中常用两种组合

概率判别函数和贝叶斯判别规则（总称最大似然法）

距离判别函数和距离判别规则（总称最小距离法）

两者有区别：

如下图所示

图片来源教科书

除了这两种常用的外，还有盒子分类法等。