深度学习-李沐-第三节-感知机

moye Lv6

感知机

单层感知机

什么是感知机

深度学习-李沐-第三节-感知机 配图 1

  • 感知机为二分类,非黑即白
  • softmax多分类,输出可能为某类别的概率

感知机训练算法

深度学习-李沐-第三节-感知机 配图 2
这里的判断负负得正、正正得正。得正说明训练正常。同时也引出了异或的问题

收敛定理

深度学习-李沐-第三节-感知机 配图 3

异或问题

深度学习-李沐-第三节-感知机 配图 4
可用多层感知机解决此问题

多层感知机

解决异或问题

深度学习-李沐-第三节-感知机 配图 5
蓝黄两个分类器,先蓝后黄

隐藏层

深度学习-李沐-第三节-感知机 配图 6
深度学习-李沐-第三节-感知机 配图 7
深度学习-李沐-第三节-感知机 配图 8
深度学习-李沐-第三节-感知机 配图 9
深度学习-李沐-第三节-感知机 配图 10

  1. 每个图层都可以应用您想要的任何函数到前一层(通常是线性变换,然后是压缩非线性)。
  2. 隐藏层的工作是将输入转换为输出层可以使用的东西。
  3. 输出层将隐藏层激活转换为您希望输出所在的任何比例。

激活函数

深度学习-李沐-第三节-感知机 配图 11
深度学习-李沐-第三节-感知机 配图 12
深度学习-李沐-第三节-感知机 配图 13
深度学习-李沐-第三节-感知机 配图 14

  • 标题: 深度学习-李沐-第三节-感知机
  • 作者: moye
  • 创建于 : 2022-08-16 15:00:46
  • 更新于 : 2022-08-16 15:00:46
  • 链接: https://www.kanes.top/2022/08/16/深度学习-李沐-第三节-感知机/
  • 版权声明: 本文章采用 CC BY-NC-SA 4.0 进行许可。
评论