2021年11月29日课二
一、大数据时代究竟改变了什么——思维方式
（一）、数据重要性
数据资源→数据资产（增值）
（二）、方法论
基于知识的理论完美主义（专家判断）→基于数据的历史经验主义
（三）、数据分析
统计学（抽样）→数据科学（大数据）
数据科学家（大数据+算法+业务知识）
（四）、计算智能
复杂算法→简单算法
（五）、决策方面
目标决策→数据决策
（六）、业务方面
基于业务数据化→基于数据业务化
（七）、产业竞合
以产业为中心→以数据为中心
二、大数据4V特征
（一）、数据量大
（二）、数据种类多
结构化数据
非结构化数据：图像；音频
半结构化数据
（三）、速度快
数据增长快
数据处理速度快
（四）、价值密度低
价值密度=有价值数据÷ALL
三、大数据项目架构—以电信日志分析为例
（一）、项目名称：电信日志分析系统
（二）、项目描述：用户访问日志数据和用户安全日志数据
（三）、项目架构分析
数据采集层→数据存储层→数据分析层→机器学习层→数据展示层
（四）、项目职责
（五）、项目优化
四、机器学习-人工智能发展
（一）、人工智能三次浪潮
跳棋：专家系统—IBM公司
象棋：统计模型—IBM公司
围棋：深度学习—DeepMind
（二）人工智能应用场景
图像识别；无人驾驶；智能翻译；语音识别；医疗智能诊断；数据挖掘
五、人工智能>机器学习>深度学习
机器学习是人工智能一个分支（数据挖掘；模式识别也是分支）
深度学习是机器学习的一种方法，用于图像识别
人工智能落地依靠机器学习
六、数据分析、数据挖掘、机器学习关系
数据：观测值
信息：可信的数据
数据分析：从数据到信息
数据挖掘：信息进行价值化
模式识别：图像识别
七、了解机器学习
（一）、机器学习=机器+学习=CPU+GPU（图形图像处理器）+数据+算法
（二）、如何判断为机器去学习
特定问题：确定性事件；基础统计问题—不需要机器学习
看是否有预测过程
八、基于规则学习和基于模型的学习
基于规则的学习是硬编码的方式进行学习
基于模型通过数据构建机器学习模型，通过模型预测
机器模型是学习模型；学习模型的k和b（参数）
2021年11月29日课二相关推荐
- 2021年11月29日yolov3害虫检测
1.pytorch-yolov3框架下载,在github和gitee中都可以下,gitee地址:https://github.com/eriklindernoren/PyTorch-YOLOv3 2. ...
- 逆水寒服务器维护公告,《逆水寒》2018年11月29日更新公告
各位自在同门: 为了保证服务器的运行稳定和服务质量,<逆水寒>将于2018年11月29日早8:00停机进行维护工作,预计维护到上午10:00.如在维护期间无法完成维护内容,开机时间将顺延. ...
- 【财经期刊FM-Radio｜2021年03月29日】
title: [财经期刊FM-Radio|2021年03月29日] 微信公众号: 张良信息咨询服务工作室 [今日热点新闻一览↓↓] 北京时间周一亚洲早盘,美股期货和原油期货小幅走低. 低基数叠加&qu ...
- 第12届蓝桥杯国赛真题剖析-2021年5月29日Scratch编程初中级组
[导读]:超平老师的<Scratch蓝桥杯真题解析100讲>已经全部完成,后续会不定期解读蓝桥杯真题,这是Scratch蓝桥杯真题解析第128讲. 第12届蓝桥杯Scratch国赛真题,这 ...
- 质量与效能 ｜ 11月29日TF84
质量和效能的平衡一直是软件研发过程中永恒的话题,从短期看质量和效能似乎是矛盾的,但是从长期看质量和效能却能做到有机地统一,面对质量和效能的平衡,我们需要的不仅是战略层面的思考,还需要微观层面的工程实践 ...
- 关于2021年11月28日PMI认证考试的报名通知
尊敬的各位考生: 经PMI和中国国际人才交流基金会研究决定,中国大陆地区2021年全国第二期PMI认证考试于11月28日举办,相关事项通知如下. 一.时间安排和举办地区 (一)考试时间:2021年11 ...
- Tuscany SCA V1.0中的扩展机制和启动过程中的扩展点[11月29日更新]
2007年9月24日Tuscany SCA 发布了V1.0版本的实现 .本文讲述的内容使用的就是基于这个版本的,代码下载地址 http://incubator.apache.org/tuscany/s ...
- 方舟服务器维护公告11月19日,《方舟指令》11月29日维护公告
致诸位御灵士: 奥利吉奈尔区誓灵协会将于11月29日(周四)9:00~13:00对以下服务器进行4小时的升级维护. 维护期间将无法进入游戏,还请各位御灵士做好下线准备, 感谢各位御灵士的理解和支持. ...
- 逆水寒服务器维护,逆水寒11月29日更新到几点进游戏 逆水寒更新维护公告
逆水寒在11月29日进行了一次新版本的更新,新团本风雪铁牢关要上线了,很多奖励接踵而来,一些小伙伴还不知道更新了什么,下面就来为大家分享一下逆水寒的更新维护公告. 各位自在同门: 为了保证服务器的运行 ...
最新文章
- 分享13个Spring Boot 优质开源项目！商城，ERP，管理系统
- 使用Nginx反向代理到go-fastdfs
- 后台getshell常用技巧总结
- c语言20152016真题及答案,2016年计算机二级《C语言》基础练习题及答案(15)
- Apache2.2.21安装图解
- Java有哪些常用的转换类,JavaSE——常用类、类型转换
- Silverlight C# 游戏开发：L5 3D基本的灯光
- java treemap value排序_【TreeMap】对Map按key和value分别排序
- ORB-SLMA3的学习笔记
- minicom与USB转串口
- android 崩溃原因,Android SurfaceView常见崩溃的原因以及解决办法
- 心电监护仪数据图解_心电监护仪数据怎么看
- 迷宫游戏|自动寻径|随机生成迷宫地图|UI|闯关|地图反转
- CSV文件分割工具开发-python版
- PS 常用的形状工具
- 同事篇(12年至今)
- 免费可视化报表，好用的web报表设计器
- 2022学生党蓝牙耳机怎么选？最新蓝牙耳机排行榜
- MongoDB快速学习
- 31岁清华副教授誓为国产工控软件护航