深度神经网络代价函数选择与性能评测研究 | |
赵宏; 郭万鹏 | |
刊名 | 软件
![]() |
2018-01-15 | |
期号 | 2018年01期页码:14-20 |
关键词 | 深度神经网络 交叉熵代价函数 二次代价函数 激活函数 TensorFlow |
ISSN号 | ISSN:1003-6970 |
英文摘要 | 深度神经网络在诸多领域取得重大突破,已经成为推动人工智能发展的主要力量,但其模型在训练过程中需要使用随机梯度下降算法在大量的训练数据上进行长时间的计算,其中,代价函数和激活函数的选择对模型的训练效率有很大的影响。利用概率论对模型训练中常用的二次代价函数和交叉熵函数进行理论推导,揭示了两者在模型训练过程中对参数寻优的影响,并给出了它们与不同激活函数的组合效果。经过TensorFlow平台验证,表明优选的代价函数和激活函数组合可以减少参数寻优的迭代次数从而加快模型的训练过程。 |
URL标识 | 查看原文 |
语种 | 中文 |
内容类型 | 期刊论文 |
源URL | [http://119.78.100.223/handle/2XXMBERH/2871] ![]() |
专题 | 计算机与通信学院 网络与信息中心 |
作者单位 | 1.兰州理工大学计算机与通信学院 2.兰州理工大学信息中心 |
推荐引用方式 GB/T 7714 | 赵宏,郭万鹏. 深度神经网络代价函数选择与性能评测研究[J]. 软件,2018(2018年01期):14-20. |
APA | 赵宏,&郭万鹏.(2018).深度神经网络代价函数选择与性能评测研究.软件(2018年01期),14-20. |
MLA | 赵宏,et al."深度神经网络代价函数选择与性能评测研究".软件 .2018年01期(2018):14-20. |
个性服务 |
查看访问统计 |
相关权益政策 |
暂无数据 |
收藏/分享 |
除非特别说明,本系统中所有内容都受版权保护,并保留所有权利。
修改评论