专栏名称: 机器学习研究会
机器学习研究会是北京大学大数据与机器学习创新中心旗下的学生组织,旨在构建一个机器学习从事者交流的平台。除了及时分享领域资讯外,协会还会举办各种业界巨头/学术神牛讲座、学术大牛沙龙分享会、real data 创新竞赛等活动。
目录
相关文章推荐
歸藏的AI工具箱  ·  AI ... ·  昨天  
歸藏的AI工具箱  ·  AI ... ·  昨天  
爱可可-爱生活  ·  【The End of Search, ... ·  2 天前  
爱可可-爱生活  ·  【单Agent vs. ... ·  2 天前  
机器之心  ·  免费!潞晨携手华为昇腾,国产算力DeepSe ... ·  2 天前  
宝玉xp  ·  转发微博-20250203132616 ·  4 天前  
51好读  ›  专栏  ›  机器学习研究会

干货|吴恩达 DeepLearning.ai 课程提炼笔记(1-3)神经网络和深度学习 --- 浅层神经网络

机器学习研究会  · 公众号  · AI  · 2017-10-07 23:05

正文

1

矩阵的维度


DNN结构示意图如图所示:



对于第l层神经网络,单个样本其各个参数的矩阵维度为:


2

为什么使用深层表示



人脸识别和语音识别:


对于人脸识别,神经网络的第一层从原始图片中提取人脸的轮廓和边缘,每个神经元学习到不同边缘的信息;网络的第二层将第一层学得的边缘信息组合起来,形成人脸的一些局部的特征,例如眼睛、嘴巴等;后面的几层逐步将上一层的特征组合起来,形成人脸的模样。


随着神经网络层数的增加,特征也从原来的边缘逐步扩展为人脸的整体,由整体到局部,由简单到复杂。层数越多,那么模型学习的效果也就越精确。


对于语音识别,第一层神经网络可以学习到语言发音的一些音调,后面更深层次的网络可以检测到基本的音素,再到单词信息,逐渐加深可以学到短语、句子。


所以从上面的两个例子可以看出随着神经网络的深度加深,模型能学习到更加复杂的问题,功能也更加强大。

电路逻辑计算:


假定计算异或逻辑输出:

即输入个数为n,输出个数为n-1。








请到「今天看啥」查看全文