无监督学习：从基本概念到四种实现模型

http://www.sohu.com/a/117638113_465975

这是今年 6 月份普渡大学副教授 Eugenio Culurciello 写的一篇关于无监督学习的概述性文章。除了基本概念，本文还介绍了无监督学习的四种实现模型：聚类学习、自动编码器、生成模型、PredNet。前几日，Culurciello 教授根据最近无监督学习的发展对此篇文章进行了更新与调整，机器之心对此进行了编译。文中提到的论文可点击「阅读原文」下载。

无监督学习可谓是深度学习的圣杯，其目标是建立可兼容小数据集进行训练的通用系统，即便是很少的数据。

如今深度学习模型往往在大型监督型数据集上训练。所谓监督型数据集，即每条数据都有一个对应的标签。比如流行的 ImageNet 数据集，有一百万张人为标记的图像。一共有 1000 个类，每个类有 1000 张图像。创建这样的数据集需要花费大量的精力，同时也需要很多的时间。现在想象创建一个有 1M 个类的数据集。试想一下，对有 100M 数据帧的视频数据集的每一帧进行分类。该任务量简直不可估量。

现在，回想一下你在小时候是如何进行学习的。是的，那时候会有人指导你，你的父母会告诉你这是一个「猫」，但是他们不会在你余生的每一分每一秒都告诉你这是一只「猫」！如今的监督学习也是这样：我一次一次地告诉你，什么是「猫」，也许高达 100 万次。然后你的深度学习模型就学会了。

理想情况下，我们希望有一个模型，它的表现与我们的大脑非常相似。只需少量的标签便可理解这个多类的世界。这里所说的类，主要是指对象类、动作类、环境类、对象组成类等等。

基本概念

无监督学习研究的主要目标是预训练一个模型（称作「识别」或「编码」）网络，供其他任务使用。编码特征通常能够用到分类任务中：例如在 ImageNet 上训练会表现出很好的结果，这与监督模型非常接近。（拿啥训练呀？？？）

迄今为止，监督模型总是比无监督的预训练模型表现的要好。其主要原因是监督模型对数据集的特性编码的更好。但如果模型运用到其他任务，监督工作是可以减少的。在这方面，希望达到的目标是无监督训练可以提供更一般的特征，用于学习并实现其它任务。

自动编码器（auto-encoders）（这到底是无监督还是有监督呀，

转载于:https://www.cnblogs.com/neverguveip/p/9457240.html

无监督学习：从基本概念到四种实现模型相关推荐

深度 | 一篇文章带你进入无监督学习：从基本概念到四种实现模型（附论文）
作者:Eugenio Culurciello 机器之心编译参与:李亚洲.武竞微信公众号:(almosthuman2014)授权转载,禁止二次转载,点此为原文链接这是今年 6 月份普渡大学副教授 ...
Sharepoin学习笔记—架构系列--04 Sharepoint的四种执行模型 1
Sharepoint210有四种执行模型 1.完全信任执行模型(Full Trust) 2.Bin/CAS 执行模型 (1与2都属于场解决方案) 3.沙盒执行模型(Sand Box) 4. 混合执行方 ...
解读人生的四种汉堡模型
解读人生的四种汉堡模型自然界给了每一个人幸福的机会,人们都知道,却不知如何得到它. --克劳狄年度最重要的壁球赛就要临近了.我每天的训练已经极度艰苦,同时还要严格控制饮食.尽管我的饮食习惯已经相当 ...
云计算的五个基本特征、四种部署模型和三种服务模式
五个基本特征自助服务使用者可以按需要获取云端的计算资源广泛的网络访问使用者可以随时随地使用云终端设备接入网络并使用云端的计算资源. 资源池化计算资源汇集在一起,形成一个个CPU池.内存池等, ...
云计算的五个基本特征、三种服务模式、四种部署模型
云计算具有 5 个基本特征. 4 种部署模型和 3 种服务模式. 云计算的 5 个基本特征如下: (1) 自助服务. 消费者不需要或很少需要云服务提供商 ...
云计算三种服务模式举例_云计算的三种服务模式和四种部署模型
云计算技术都是基于3种特殊的云计算服务模式,它们都具有流行.有效.灵活.用户友好等特征.因此,云架构的基本模式是:本文引用地址:http://www.eepw.com.cn/article/20171 ...
云计算服务的四种部署模型
云计算服务的四种部署模型包括: 云端部署:所有资源和服务都在云端运行. 混合部署:部分资源和服务在本地,部分在云端. 分布式部署:资源和服务分布在多个地点. 私有云部署:资源和服务都在企业内部运行,不 ...
数据可视化策略_从无见识到有见识的四种设计有影响力的数据可视化的策略
数据可视化策略 As Alberto Cairo, a well-known information designer, professor, and the Knight Chair in Visu ...
TDengine：无模式写入行协议的四种方式
小 T 导读:为了在数据采集项频繁变动的情况下保证用户仍然能够顺利地完成数据记录工作,TDengine 提供了三种无模式写入协议,分别是 InfluxDB Line 协议.OpenTSDB Telne ...

无监督学习：从基本概念到四种实现模型

无监督学习：从基本概念到四种实现模型相关推荐

最新文章

热门文章