学习笔记
未读
【机器学习】信息熵的理解
信息量的理解 信息量是对信息的度量,是指某个事件发生时我们所接收到的信息量的多少。信息的大小跟随机事件的概率有关。越小概率的事件发生了产生的信息量越大,越大概率发生事件发生了产生的信息量越小。 “太阳从东边升起”,是一个必然事件,其概率为1,当它发生时,我们不能从其中提取出对我们有什么用的信
学习笔记
未读
【机器学习】KNN算法详解
KNN算法概述 KNN(k-nearest neighbor)算法属于机器学习中的有监督分类算法,主要用于分类,是最简单的机器学习算法之一顾名思义,其算法主体思想就是根据距离相近的邻居类别,来判定自己的所属类别。 KNN算法思路 1、计算测试对象与训练集中所有对象的距离,一般采用欧式距离。 2、找出