会员可以在此提问,百战程序员老师有问必答
对大家有帮助的问答会被标记为“推荐”
看完课程过来浏览一下别人提的问题,会帮你学得更全面
截止目前,同学们一共提了 128778个问题
人工智能/第六阶段:机器学习-线性分类/SVM支持向量机算法 46楼
人工智能/第六阶段:机器学习-线性分类/Softmax回归 47楼
人工智能/第六阶段:机器学习-线性分类/逻辑回归 48楼

信息论中,基于相同事件测度的两个概率分布交叉熵是指,当基于一个“非自然”(相对于“真实”分布而言)的概率分布进行编码时,在事件集合中唯一标识一个事件所需要的平均比特数(bit)。

基于概率分布的交叉熵定义为:

其中的熵,是从的KL散度(也被称为p相对于q的相对熵)。

以上内容来自搜狗百科 



虽然形式一样。但是视频中的是softmax的概率经过log进行减少计算的结果,并不能称之为交叉熵

人工智能/第六阶段:机器学习-线性分类/Softmax回归 49楼
人工智能/第六阶段:机器学习-线性分类/逻辑回归 50楼
人工智能/第六阶段:机器学习-线性分类/SVM支持向量机算法 51楼
人工智能/第六阶段:机器学习-线性分类/SVM支持向量机算法 52楼
人工智能/第六阶段:机器学习-线性分类/Softmax回归 55楼
人工智能/第六阶段:机器学习-线性分类/Softmax回归 57楼
人工智能/第六阶段:机器学习-线性分类/SMO优化算法 58楼
人工智能/第六阶段:机器学习-线性分类/逻辑回归 60楼

百战程序员微信公众号

百战程序员微信小程序

©2014-2024 百战汇智(北京)科技有限公司 All Rights Reserved 北京亦庄经济开发区科创十四街 赛蒂国际工业园
网站维护:百战汇智(北京)科技有限公司
京公网安备 11011402011233号    京ICP备18060230号-3    营业执照    经营许可证:京B2-20212637