笔记:神经网络与深度学习绪论

  • 绪论
  • 一、关于本课程
    • 1.知识结构
    • 2.推荐教材
    • 3.推荐课程
  • 二、常用的深度学习框架

绪论

最近开始学习机器学习,从B站找到了一篇网课:复旦大学——邱锡鹏的《神经网络与机器学习》,因此写了几篇课程笔记,以便日后学习。
课程链接
课本以及课程PPT下载


一、关于本课程

人工智能的一个子领域。
神经网络:一种以(人工)神经元为基本单元的模型
深度学习:一类机器学习问题,主要解决贡献度分配问题
这门课大致讲两者的交集:以神经网络为主要模型的深度学习。

1.知识结构

对这门课涉及的知识进行一个梳理

按照顺序来

2.推荐教材

邱锡鹏,神经网络与深度学习,机械工业出版社, 2020,ISBN 9787111649687
https://nndl.github.io/
提供配套练习

阿斯顿·张等,动手学深度学习, ISBN: 9787115505835
https://d2l.ai/
有PyTorch版

Bishop, C.M. (2006). Pattern recognition and Machine Learning. Springer. ISBN 9780387310732.
网上有中文版 by马春鹏

Wright, S., & Nocedal, J. (1999). Numerical optimization. Springer Science, 35(67-68), 7.

Boyd, S., & Vandenberghe, L. (2004). Convex optimization. Cambridge university press.

3.推荐课程

斯坦福大学CS224n: Deep Learning for Natural Language Processing
https://web.stanford.edu/class/archive/cs/cs224n/cs224n.1194/

Chris Manning 主要讲解自然语言处理领域的各种深度学习模型
斯坦福大学CS231n: Convolutional Neural Networks for Visual Recognition
http://cs231n.stanford.edu/

Fei-Fei Li Andrej Karpathy 主要讲解CNN、RNN在图像领域的应用
加州大学伯克利分校 CS 294: Deep Reinforcement Learning
http://rail.eecs.berkeley.edu/deeprlcourse/

二、常用的深度学习框架

简易和快速的原型设计
自动梯度计算
无缝CPU和GPU切换

笔记:神经网络与深度学习—绪论相关推荐

  1. 机器学习笔记——神经网络与深度学习

    机器学习笔记--神经网络与深度学习 一.神经网络引言 二.神经元模型与激活函数 2.1 神经元模型 2.2 激活函数 2.2.1 sigmoid & tanh 2.2.2 ReLU激活函数 2 ...

  2. 吴恩达深度学习笔记——神经网络与深度学习(Neural Networks and Deep Learning)

    文章目录 前言 传送门 神经网络与深度学习(Neural Networks and Deep Learning) 绪论 梯度下降法与二分逻辑回归(Gradient Descend and Logist ...

  3. 阅读笔记--神经网络与深度学习(邱锡鹏)

    第2章 机器学习概述 2.2 机器学习三要素 模型 学习准则 优化算法 2.2.1 损失函数 0-1损失函数 虽然0-1损失能够客观的评价模型的好坏,但缺点是数学性质不是很好:不连续且导数为0,难以优 ...

  4. 《神经网络与深度学习》邱希鹏 学习笔记 (1)

    <神经网络与深度学习>邱希鹏 学习笔记 (1) 完成进度 第一章 绪论 深度学习与神经网络 人工智能 图灵测试 达特茅斯 *(Dartmouth)* 会议 人工智能的研究领域 人工智能发展 ...

  5. 吴恩达《神经网络与深度学习》精炼笔记(5)-- 深层神经网络

    上节课我们主要介绍了浅层神经网络.首先介绍神经网络的基本结构,包括输入层,隐藏层和输出层.然后以简单的2 layer NN为例,详细推导了其正向传播过程和反向传播过程,使用梯度下降的方法优化神经网络参 ...

  6. 吴恩达《神经网络与深度学习》精炼笔记(4)-- 浅层神经网络

    上节课我们主要介绍了向量化.矩阵计算的方法和python编程的相关技巧.并以逻辑回归为例,将其算法流程包括梯度下降转换为向量化的形式,从而大大提高了程序运算速度.本节课我们将从浅层神经网络入手,开始真 ...

  7. Coursera吴恩达《神经网络与深度学习》课程笔记(3)-- 神经网络基础之Python与向量化

    红色石头的个人网站:redstonewill.com 上节课我们主要介绍了逻辑回归,以输出概率的形式来处理二分类问题.我们介绍了逻辑回归的Cost function表达式,并使用梯度下降算法来计算最小 ...

  8. 神经网络与深度学习(邱锡鹏)-学习笔记

    神经网络与深度学习 第一章 绪论 第二章 机器学习概述 第三章 线性模型 深度学习是机器学习的一个分支,是指一类问题以及解决这类问题的方法.人工神经网络,也简称神经网络,是一种受人脑神经系统的工作方式 ...

  9. AI学习笔记(九)从零开始训练神经网络、深度学习开源框架

    AI学习笔记之从零开始训练神经网络.深度学习开源框架 从零开始训练神经网络 构建网络的基本框架 启动训练网络并测试数据 深度学习开源框架 深度学习框架 组件--张量 组件--基于张量的各种操作 组件- ...

最新文章

  1. es6 Module语法
  2. Swift2.0语言教程之函数嵌套调用形式
  3. 一日千里 云计算普及势不可挡
  4. search string iteration
  5. SQL Server2008数据库管理 (第二部分)
  6. yolov5训练自己的数据集(一文搞定训练)
  7. wireshark不显示rtsp问题(四)
  8. html5 成语连连看,全国通用五年级下册语文讲义-阅读与作文:学写读后感(含答案)[参考].pdf...
  9. oppo9.0系统手机一键激活Xposed框架的步骤
  10. 《Java核心技术》基于Java 17全面升级
  11. 射频天线设计-Smith圆图
  12. 0.96寸OLED 屏幕SSD1306驱动四脚原理图PDF
  13. 元素出现>强调>再消失的动画制作【PPT动画】
  14. 【软件需求工程】北理的恶龙们04——项目成果总结
  15. mongodb常用方法
  16. 真 · 前端Vue实战:头条新闻开发项目(下)
  17. HTML学习笔记及案例(第四周 第1次)
  18. android 禁用触摸屏,animation时禁用所有触摸屏交互
  19. 深入分析:代理游戏真的可以赚钱吗?
  20. DeepSurf: A surface-based deep learning approach for theprediction of ligand binding sites on prote

热门文章

  1. 企业安全建设丨标准化建设之网络安全应急响应浅析
  2. SSL数字证书下载流程是怎么样的
  3. 【算法随记三】小半径中值模糊的急速实现(16MB图7.5ms实现) + Photoshop中蒙尘和划痕算法解读。...
  4. 损失函数,mse,cee
  5. pytorch .detach() .detach_() 和 .data用于切断反向传播
  6. 程序员老鸟写sql语句的经验之谈
  7. 何志强:张尚昀式的当代好青年
  8. react项目中使用阿里播放器播放视频,包括切换视频,播放定时跳转(兼容ios和andro),播放完成
  9. 高一被清华姚班录取,高三委拒谷歌 offer,一个重度网瘾少年到理论计算机科学家的蜕变!......
  10. 【soft6星评论】站在5G时代的入口,我们看到了“智慧交通”的含苞待放