目录
1.5 神经网络模型的决定因素:Y = W * X + B
第1章 人工神经网络ANNG概述
1.1 生物神经网络回顾
![[人工智能-深度学习-7]:神经网络基础 - 人工神经网络ANN_数据](https://s9.51cto.com/images/blog/202109/22/9cc30911cc20a33f8611c7ec480cf5ae.gif?x-oss-process=image/watermark,size_16,text_QDUxQ1RP5Y2a5a6i,color_FFFFFF,t_100,g_se,x_10,y_10,shadow_90,type_ZmFuZ3poZW5naGVpdGk=)
![[人工智能-深度学习-7]:神经网络基础 - 人工神经网络ANN_数据_02](https://s4.51cto.com/images/blog/202109/22/c620145decb82e0d0df587f09a469a05.jpeg?x-oss-process=image/watermark,size_16,text_QDUxQ1RP5Y2a5a6i,color_FFFFFF,t_100,g_se,x_10,y_10,shadow_90,type_ZmFuZ3poZW5naGVpdGk=)
1.2 人工神经网络概述
人工神经网络(Artificial Neural Network,即ANN ),是20世纪80 年代以来人工智能领域兴起的研究热点。
它从信息处理角度对人脑神经元网络进行抽象, 建立某种简单模型,按不同的连接方式组成不同的网络。在工程与学术界也常直接简称为神经网络或类神经网络。
最近十多年来,人工神经网络的研究工作不断深入,已经取得了很大的进展,其在模式识别、智能机器人、自动控制、预测估计、生物、医学、经济等领域已成功地解决了许多现代计算机难以解决的实际问题,表现出了良好的智能特性。
![[人工智能-深度学习-7]:神经网络基础 - 人工神经网络ANN_神经网络_03](https://s9.51cto.com/images/blog/202109/23/865347cff690edc272c396744d96ba4a.png?x-oss-process=image/watermark,size_16,text_QDUxQ1RP5Y2a5a6i,color_FFFFFF,t_100,g_se,x_10,y_10,shadow_90,type_ZmFuZ3poZW5naGVpdGk=)
1.2 人工神经网络的层次模型
![[人工智能-深度学习-7]:神经网络基础 - 人工神经网络ANN_人工智能_04](https://s7.51cto.com/images/blog/202109/22/f79c8ac226190a6644295fbd8a9032fa.jpeg?x-oss-process=image/watermark,size_16,text_QDUxQ1RP5Y2a5a6i,color_FFFFFF,t_100,g_se,x_10,y_10,shadow_90,type_ZmFuZ3poZW5naGVpdGk=)
神经网络是一种运算模型,由大量的节点(或称神经元)之间相互联接构成。
(1)深入层:对应生物神经网络中的周围神经系统的传入神经元
由有大量的输入节点组成,每个输入节点代表样本的一个输入属性。所有的输入属性,组成了样本,用多维的“张量”这种数据结构来描述。
(2)隐藏层:对应生物神经网络中的中枢神经系统的中枢神经元
由大量的神经元节点组成,负责对输入数据进行处理。
网络的输出对输入的响应,则依赖于神经元的网络连接方式,以及各个神经元的权重参数。
(3)输出层:对应生物神经网络中的周围神经系统的输出神经
有大量的神经元组成,负责数据的输出。
1.3 人工神经网络的本质是“图” 结构
神经网络自身通常都是对自然界某种算法或者函数的逼近,也可能是对一种逻辑策略的表达。
其底层的数据基础是“图”。
在计算机科学中,一个图就是一些顶点的集合,这些顶点通过一系列边结对(连接)。
顶点用圆圈表示,边就是这些圆圈之间的连线。顶点之间通过边连接。
注意:顶点有时也称为节点或者交点,边有时也称为链接。
![[人工智能-深度学习-7]:神经网络基础 - 人工神经网络ANN_深度学习_05](https://s3.51cto.com/images/blog/202109/22/94561a6666ac91d767f56caff19b4d73.png?x-oss-process=image/watermark,size_16,text_QDUxQ1RP5Y2a5a6i,color_FFFFFF,t_100,g_se,x_10,y_10,shadow_90,type_ZmFuZ3poZW5naGVpdGk=)
与“图”相对应的常见数据结构有:
(1)链表数据结构
![[人工智能-深度学习-7]:神经网络基础 - 人工神经网络ANN_神经网络_06](https://s8.51cto.com/images/blog/202109/22/0f6a4d9031ceecf3f683ca869d8fceb8.jpeg?x-oss-process=image/watermark,size_16,text_QDUxQ1RP5Y2a5a6i,color_FFFFFF,t_100,g_se,x_10,y_10,shadow_90,type_ZmFuZ3poZW5naGVpdGk=)
(2)“树“型数据结构
![[人工智能-深度学习-7]:神经网络基础 - 人工神经网络ANN_数据_07](https://s3.51cto.com/images/blog/202109/22/16d3d46fbfdc938b8f807956eb887fb9.jpeg?x-oss-process=image/watermark,size_16,text_QDUxQ1RP5Y2a5a6i,color_FFFFFF,t_100,g_se,x_10,y_10,shadow_90,type_ZmFuZ3poZW5naGVpdGk=)
1.4 常见计算机网络的拓扑结构
![[人工智能-深度学习-7]:神经网络基础 - 人工神经网络ANN_深度学习_08](https://s8.51cto.com/images/blog/202109/22/36e978775f7e55fda65160d9ae3ae2fc.png?x-oss-process=image/watermark,size_16,text_QDUxQ1RP5Y2a5a6i,color_FFFFFF,t_100,g_se,x_10,y_10,shadow_90,type_ZmFuZ3poZW5naGVpdGk=)
1.5 神经网络模型的决定因素:Y = W * X + B
![[人工智能-深度学习-7]:神经网络基础 - 人工神经网络ANN_人工神经网络_09](https://s7.51cto.com/images/blog/202109/22/0e4ab1f5d6a098d184ef961ce22098c2.png?x-oss-process=image/watermark,size_16,text_QDUxQ1RP5Y2a5a6i,color_FFFFFF,t_100,g_se,x_10,y_10,shadow_90,type_ZmFuZ3poZW5naGVpdGk=)
决定神经网络模型的核心是:
(1)神经网络的拓扑结构:
- 输入数据的形状, 即输入张量X,分为样本数据和预测数据
- 输出数据的形状, 即输出张量Y,分为样本标签和预测结果
- 网络的拓扑结构, 即W, B矩阵形状,W和B合并后的简化模型是: Y = W * X
网络拓扑结构,反应在深度学习领域:就是各种大牛、大神们公布的、发明的神经网络的模型。
(2)神经网络的参数值
- W, B矩阵中的W,B参数的数值
- W,B参数的数值是:通过输入样本,对模型训练,自动设置的,而不是人为预先设计的。
神经网络的参数值,反应在深度学习领域,就是模型的训练。
第2章 人工神经网络的分类
2.1 按照神经网络的层数分
- 单层神经网络
- 两层神经网络
- 多层神经网络
2.2 按照神经网络深浅分
- 浅层神经网络
- 深度神经网络
2.3 神经网络的综合分类
![[人工智能-深度学习-7]:神经网络基础 - 人工神经网络ANN_神经网络_10](https://s5.51cto.com/images/blog/202109/22/bc1451e9ddbf5d8a9d24365f50a7e436.png?x-oss-process=image/watermark,size_16,text_QDUxQ1RP5Y2a5a6i,color_FFFFFF,t_100,g_se,x_10,y_10,shadow_90,type_ZmFuZ3poZW5naGVpdGk=)
第3章 人工神经网络基础性核心功能
3.1 线性回归:拟合问题
(1)单个神经元的线性拟合
![[人工智能-深度学习-7]:神经网络基础 - 人工神经网络ANN_人工神经网络_11](https://s3.51cto.com/images/blog/202109/22/3e4787c0b53b822ac9de68b8f1522af0.png?x-oss-process=image/watermark,size_16,text_QDUxQ1RP5Y2a5a6i,color_FFFFFF,t_100,g_se,x_10,y_10,shadow_90,type_ZmFuZ3poZW5naGVpdGk=)
(2)多个神经元的非线性拟合
![[人工智能-深度学习-7]:神经网络基础 - 人工神经网络ANN_人工神经网络_12](https://s8.51cto.com/images/blog/202109/22/7540ff174357db039b8be0bb41487fc2.png?x-oss-process=image/watermark,size_16,text_QDUxQ1RP5Y2a5a6i,color_FFFFFF,t_100,g_se,x_10,y_10,shadow_90,type_ZmFuZ3poZW5naGVpdGk=)
(3)无数个神经元的空间拟合能力
![[人工智能-深度学习-7]:神经网络基础 - 人工神经网络ANN_深度学习_13](https://s3.51cto.com/images/blog/202109/22/1f8b53eb831761b4904cdf414f4beb7c.png?x-oss-process=image/watermark,size_16,text_QDUxQ1RP5Y2a5a6i,color_FFFFFF,t_100,g_se,x_10,y_10,shadow_90,type_ZmFuZ3poZW5naGVpdGk=)
3.2 逻辑回归:分类问题
(1)单个神经元的逻辑“非”运算:0或1
![[人工智能-深度学习-7]:神经网络基础 - 人工神经网络ANN_人工智能_14](https://s5.51cto.com/images/blog/202109/22/a72896004a341a1ddac7df4bac809c6a.png?x-oss-process=image/watermark,size_16,text_QDUxQ1RP5Y2a5a6i,color_FFFFFF,t_100,g_se,x_10,y_10,shadow_90,type_ZmFuZ3poZW5naGVpdGk=)
(2)单个神经元的逻辑“与”运算
![[人工智能-深度学习-7]:神经网络基础 - 人工神经网络ANN_数据_15](https://s8.51cto.com/images/blog/202109/22/c748da9e92dddc8f0a4fbd8715b2e00b.png?x-oss-process=image/watermark,size_16,text_QDUxQ1RP5Y2a5a6i,color_FFFFFF,t_100,g_se,x_10,y_10,shadow_90,type_ZmFuZ3poZW5naGVpdGk=)
(3)单个神经元的“或”运算
![[人工智能-深度学习-7]:神经网络基础 - 人工神经网络ANN_神经网络_16](https://s8.51cto.com/images/blog/202109/22/e4aef3c2dee651d126bc88958b19a891.png?x-oss-process=image/watermark,size_16,text_QDUxQ1RP5Y2a5a6i,color_FFFFFF,t_100,g_se,x_10,y_10,shadow_90,type_ZmFuZ3poZW5naGVpdGk=)
(4)两个神经元的“亦或”运算
![[人工智能-深度学习-7]:神经网络基础 - 人工神经网络ANN_神经网络_17](https://s9.51cto.com/images/blog/202109/22/327a579141535a478960a7ba547e68c0.png?x-oss-process=image/watermark,size_16,text_QDUxQ1RP5Y2a5a6i,color_FFFFFF,t_100,g_se,x_10,y_10,shadow_90,type_ZmFuZ3poZW5naGVpdGk=)
(5)多神经元复杂的逻辑运算
![[人工智能-深度学习-7]:神经网络基础 - 人工神经网络ANN_数据_18](https://s5.51cto.com/images/blog/202109/22/f893934e44de8eb50f2d2c41ca97e721.png?x-oss-process=image/watermark,size_16,text_QDUxQ1RP5Y2a5a6i,color_FFFFFF,t_100,g_se,x_10,y_10,shadow_90,type_ZmFuZ3poZW5naGVpdGk=)
(6)多个神经元的“多”分类运算
![[人工智能-深度学习-7]:神经网络基础 - 人工神经网络ANN_数据_19](https://s3.51cto.com/images/blog/202109/22/16f2440b5a38f1878daaf9e223bec45f.png?x-oss-process=image/watermark,size_16,text_QDUxQ1RP5Y2a5a6i,color_FFFFFF,t_100,g_se,x_10,y_10,shadow_90,type_ZmFuZ3poZW5naGVpdGk=)
(7)多个神经元的复杂分类
![[人工智能-深度学习-7]:神经网络基础 - 人工神经网络ANN_人工智能_20](https://s3.51cto.com/images/blog/202109/22/7a381b499f72a40061ef83f4f717ab2d.png?x-oss-process=image/watermark,size_16,text_QDUxQ1RP5Y2a5a6i,color_FFFFFF,t_100,g_se,x_10,y_10,shadow_90,type_ZmFuZ3poZW5naGVpdGk=)
3.3 深度神经网络的应用
(1)现在、当下
![[人工智能-深度学习-7]:神经网络基础 - 人工神经网络ANN_人工智能_21](https://s4.51cto.com/images/blog/202109/22/146663326abac920f16681a07439eda9.png?x-oss-process=image/watermark,size_16,text_QDUxQ1RP5Y2a5a6i,color_FFFFFF,t_100,g_se,x_10,y_10,shadow_90,type_ZmFuZ3poZW5naGVpdGk=)
(2)未来
![[人工智能-深度学习-7]:神经网络基础 - 人工神经网络ANN_神经网络_22](https://s3.51cto.com/images/blog/202109/22/27b476a73d375a84e48758b0bfa196b4.png?x-oss-process=image/watermark,size_16,text_QDUxQ1RP5Y2a5a6i,color_FFFFFF,t_100,g_se,x_10,y_10,shadow_90,type_ZmFuZ3poZW5naGVpdGk=)
第4章 人工神经网络的发展
4.1 人工神经网络大观园
![[人工智能-深度学习-7]:神经网络基础 - 人工神经网络ANN_数据_23](https://s5.51cto.com/images/blog/202109/22/3c22e26fbb77cf36ca2c506542fbebda.png?x-oss-process=image/watermark,size_16,text_QDUxQ1RP5Y2a5a6i,color_FFFFFF,t_100,g_se,x_10,y_10,shadow_90,type_ZmFuZ3poZW5naGVpdGk=)
4.2 人工神经网络的发展
![[人工智能-深度学习-7]:神经网络基础 - 人工神经网络ANN_神经网络_24](https://s5.51cto.com/images/blog/202109/22/41145f18c45dd5d63463876b66d059b7.png?x-oss-process=image/watermark,size_16,text_QDUxQ1RP5Y2a5a6i,color_FFFFFF,t_100,g_se,x_10,y_10,shadow_90,type_ZmFuZ3poZW5naGVpdGk=)
4.3 人工神经网络发展的动力
![[人工智能-深度学习-7]:神经网络基础 - 人工神经网络ANN_人工智能_25](https://s8.51cto.com/images/blog/202109/22/4192fc6331162877b8e263fa38c03285.png?x-oss-process=image/watermark,size_16,text_QDUxQ1RP5Y2a5a6i,color_FFFFFF,t_100,g_se,x_10,y_10,shadow_90,type_ZmFuZ3poZW5naGVpdGk=)
第5章 浅层神经网络
5.1 单层神经网络
![[人工智能-深度学习-7]:神经网络基础 - 人工神经网络ANN_神经网络_26](https://s9.51cto.com/images/blog/202109/22/f0c20dbd6c4eca6ca4f82197eb4ab2ec.png?x-oss-process=image/watermark,size_16,text_QDUxQ1RP5Y2a5a6i,color_FFFFFF,t_100,g_se,x_10,y_10,shadow_90,type_ZmFuZ3poZW5naGVpdGk=)
![[人工智能-深度学习-7]:神经网络基础 - 人工神经网络ANN_深度学习_27](https://s4.51cto.com/images/blog/202109/22/86475d28464a28ad59bea09bc3d09460.png?x-oss-process=image/watermark,size_16,text_QDUxQ1RP5Y2a5a6i,color_FFFFFF,t_100,g_se,x_10,y_10,shadow_90,type_ZmFuZ3poZW5naGVpdGk=)
5.2 二层神经网络
![[人工智能-深度学习-7]:神经网络基础 - 人工神经网络ANN_人工神经网络_28](https://s6.51cto.com/images/blog/202109/22/975c40f8e1b443fbcb6c8b79a9dd0e9e.png?x-oss-process=image/watermark,size_16,text_QDUxQ1RP5Y2a5a6i,color_FFFFFF,t_100,g_se,x_10,y_10,shadow_90,type_ZmFuZ3poZW5naGVpdGk=)
5.3 四层神经网络
![[人工智能-深度学习-7]:神经网络基础 - 人工神经网络ANN_人工神经网络_29](https://s3.51cto.com/images/blog/202109/22/a82d299b9334ec3916c0def293da52b4.jpeg?x-oss-process=image/watermark,size_16,text_QDUxQ1RP5Y2a5a6i,color_FFFFFF,t_100,g_se,x_10,y_10,shadow_90,type_ZmFuZ3poZW5naGVpdGk=)
第6章 深层神经网络与深度学习
6.1 什么是深度神经网络
![[人工智能-深度学习-7]:神经网络基础 - 人工神经网络ANN_人工神经网络_30](https://s5.51cto.com/images/blog/202109/22/41dcc28973e4386706a40702386cbf9b.png?x-oss-process=image/watermark,size_16,text_QDUxQ1RP5Y2a5a6i,color_FFFFFF,t_100,g_se,x_10,y_10,shadow_90,type_ZmFuZ3poZW5naGVpdGk=)
(1)层数:深层神经网络的层数可以高达几十层、上百层,甚至上千层。
(2)特征:深度神经网络能否自己、自动发掘数据中深度隐藏的特征。
(3)计算:深度神经网络的计算机极大
(4)参数:深度神经网络的w,b的参数可以高达几百万、几千万个。
更多文章请关注《万象专栏》
转载请注明出处:https://www.wanxiangsucai.com/read/cv14553