aoi学院

Aisaka's Blog, School of Aoi, Aisaka University

CS231n: Convolutional Neural Networks for Visual Recognition [2017] 课程笔记 Note 4

Note 4

原文:optimization notes

翻译:最优化笔记(上)(下)

该笔记介绍了图像分类任务的第三个关键部分:最优化。内容列表如下:

  • 简介
  • 损失函数可视化
  • 最优化
    • 策略#1:随机搜索
    • 策略#2:随机局部搜索
    • 策略#3:跟随梯度 译者注:上篇截止处
  • 梯度计算
    • 使用有限差值进行数值计算
    • 微分计算梯度
  • 梯度下降
  • 小结