一天搞懂深度学习--深度学习简介
前言
《一天搞懂深度学习》是一个300多页的PPT,是台湾学者李宏毅写的。虽然对于深度学习也有一定的了解了,但是有些知识点还是会经常忘记。温故知新,所以决定重看这本算是入门书籍吧。
PPT主要分成了四个部分:所以本系列博客也将分成四篇来写。分别是:深度学习简介,训练神经网络的要点,神经网络的多样性和神经网络的新浪潮。
一、深度学习介绍
(1)神经网络主要有三个部分:定义模型函数->判断模型函数好坏->选择一个最好的函数
1、神经网络之所以叫神经网络是因为它的作用过程很像神经单元。以下是神经元结构。
2.因为神经元之间连接方式的不同,就延伸出了许多种不同的神经网络。
比如全连接前向神经网络。这个网络的特点是前一层的每个神经单元都与下一层的所有的神经单元连接。
3.判断模型函数的损失,最关键的就是要定义模型的损失函数,当我们确定了模型的损失函数,那么我们的目标就是最小化这个损失。进一步的说,选择最好的模型参数过程也变成求最小化损失函数的参数过程。
4.选择最好的模型参数。采用枚举法显然是不可行的。一种有效的选择模型参数的方法是梯度下降法。但是梯度下降法并不能保证会到达全局最小,它经常会陷入局部最小的情况,这取决于初始点的选择。在深度学习中梯度下降算法的应用有一个特别的名字后向传播算法。后向传播算法其实就是一个利用梯度下降不断更新神经网络中不同神经节点的权重的过程。
二、深度学习为什么深
(1)深度学习为什么深
1.毫无疑问,参数越多,模型训练的效果会更好。但是有理论已经证明了单隐层有足够多的神经单元的话可以实现任意函数。但是实际上单隐层内随着节点单元的数量增多,准确率提升的太慢,并且可能不升反降。
2.相比于用单隐层进行训练,深度神经网络表示函数的方式更加的简洁。
3.构建深度神经网络有利于模块化训练过程,这样或许我们就可以利用较少的训练数据来达到想要的效果。
三、深度学习初探
(1)可以使用keras和tensorflow进行模型训练
转载于:https://www.cnblogs.com/whatyouknow123/p/8916700.html
一天搞懂深度学习--深度学习简介相关推荐
- 5分钟搞懂什么是深度学习
目录 现在各种名词非常火,什么人工智能.机器学习.深度学习,那么我要学习它,当然是要在一个大的方向.轮廓上看到它.比如爬一座山,先远远的看看,对它有一个大致的了解. 好了,先上一张图,远远的看一下: ...
- 三分钟搞懂机器学习和深度学习的区别
深度学习是机器学习算法的子类,其特殊性是有更高的复杂度.因此,深度学习属于机器学习,但它们绝对不是相反的概念.我们将浅层学习称为不是深层的那些机器学习技术. 让我们开始将它们放到我们的世界中: 这种高 ...
- 计算机科学CSTA,学编程,搞懂CSTA K-12计算机科学学习标准
科学信息技术逐步成为现代人生活和经济的核心.不论是为了适应频繁使用计算机的当今社会,还是为了将来的职业做好准备,学生们都必须对计算机科学原理和实践拥有一个更加清晰的理解.在人们对于信息技术教育的普及与 ...
- 一文搞懂mysql:mysql学习目录链接大全
之前学习了mysql.整理出来分享给大家. 序号 名字 1 mysql数据库入门教程(1):数据库的相关概念,存储特点,软件安装教程,数据库启动,服务端登录退出 2 mysql数据库入门教程(2):常 ...
- 太强了! 李宏毅:1 天搞懂深度学习,我总结了 300 页 PPT
<1 天搞懂深度学习>,300 多页的 ppt,台湾李宏毅教授写的,非常棒.不夸张地说,是我看过最系统,也最通俗易懂的,关于深度学习的文章. 这份 300 页的 PPT,被搬运到了 Sli ...
- 商品pid是什么意思_0基础搞懂自动驾驶传统算法与深度学习的鸿沟-PID控制算法与MLP优化方法...
0基础搞懂自动驾驶传统算法与深度学习的鸿沟这个专题核心是要思考如何让rule-base的自动驾驶算法逐步提升为data-driven的算法,从而尽可能的提升软件的泛化性.数据驱动的逻辑代替控制,规划, ...
- 下载 | 李宏毅:1 天搞懂深度学习,我总结了 300 页 PPT
<1 天搞懂深度学习>,300 多页的 ppt,台湾李宏毅教授写的,非常棒.不夸张地说,是我看过最系统,也最通俗易懂的,关于深度学习的文章. 这份 300 页的 PPT,被搬运到了 Sli ...
- mlp参数调整_0基础搞懂自动驾驶传统算法与深度学习的鸿沟-PID控制算法与MLP优化方法...
0基础搞懂自动驾驶传统算法与深度学习的鸿沟这个专题核心是要思考如何让rule-base的自动驾驶算法逐步提升为data-driven的算法,从而尽可能的提升软件的泛化性.数据驱动的逻辑代替控制,规划, ...
- 15个小时彻底搞懂NLP自然语言处理(2021最新版附赠课件笔记资料)【LP自然语言处理涉及到深度学习和神经网络的介绍、 Pytorch、 RNN自然语言处理】 笔记
15个小时彻底搞懂NLP自然语言处理(2021最新版附赠课件笔记资料)[LP自然语言处理涉及到深度学习和神经网络的介绍. Pytorch. RNN自然语言处理] 笔记 教程与代码地址 P1 机器学习与 ...
- 【深度学习】李宏毅:1 天搞懂深度学习,我总结了 300 页 PPT(附思维导图)...
转载自:机器学习算法那些事 ID:Charlotte77 公众号:Charlotte数据挖掘 By Charlotte77 前言:李宏毅的教材,非常经典,B站有配套视频,文末附下载链接! ...
最新文章
- DOM---文档对象模型(Document Object Model)的基本使用
- 第六章 定积分的应用 —— 第一节 定积分的元素法
- 将亚型多态性与通用多态性相关联的危险
- hive 导出json格式 文件_hive中创建hive-json格式的表及查询
- Oracle笔记-使用sql命令插入clob数据(大于4000,适用于18c)
- Centos 7 更改系统语言为中文
- [算法模板]莫比乌斯反演
- 闲鱼Flutter混合工程持续集成的最佳实践
- 使用fiddler+itunes来做到下载APP在AppStore中的历史版本 注意事项
- 交互设计常识:设计模型分析
- 《哲学100问》读书感想:哲学王是怎样练成的
- vue使用echarts图表渲染异常本地正常,线上时有时无的渲染
- flutter中的点击事件
- 高中电子技术——万用表的表笔接法(指针式和数字式)
- Html怎么判断ie5,css怎样判断IE浏览器?
- 2022年中国智能家居产业链图谱 | 产业链全景图
- linux tar压缩权限,linux tar压缩命令
- 这么选家用投影仪,再也不交智商税
- rocketMQ系列1
- android user-agent iso-8859-1,微信大众,平台消息接口开辟(31)微信浏览器HTTP_USER_AGENT断定...