黑马大数据分析课程---1、大数据分析介绍
黑马大数据分析课程---1、大数据分析介绍
一、总结
一句话总结：
大数据为机器学习、人工智能等提供了数据依据
1、数据清洗包括哪些方面？
去掉脏数据
使数据格式化
2、数据挖掘是什么？
高级的数据分析方法：数据挖掘是一种高级的数据分析方法，侧重解决四类数据分析问题：分类、聚类、关联和预测
寻找有价值信息：数据分析和数据挖掘的本质是一样的，都是从数据里面发现关于业务的知识。
3、常用的分布式方案有哪些？
分布式应用和服务：【将应用和服务进行分层和切割】，然后分别部署：比如分布式服务框架 Dubbo
分布式静态资源：【静态资源】：比如CDN
分布式数据和存储：【单台计算机内存空间不足】：比如Apache Hadoop HDFFS
分布式计算：【计算】：比如Apache Hadoop MapReduce
4、分布式和集群的区别？
分布式：多台不同的服务器，【部署不同的服务模块】
集群：多台不同的服务器，【部署相同的应用或服务模块】
5、facebook是社交网站，那么评估机构评估facebook的时候，主要评估的是其哪方面的价值？
是其社交网络上的数据
6、云计算是什么？
硬件资源虚拟化
7、数据分析是什么？
发掘数据中的价值，发掘数据中的规律
8、如何采集用户浏览网站的数据？
js埋点：用js对用户的行为(比如点击啊，跳转啊)进行采集，不影响用户的正常操作，
存储的话可以用Nginx的自定义数据格式
9、采集到的用户的浏览数据，如何跨域发送到后台？
让数据伪装成图片：【比如京东就是这样干的】：/log.gif?a=111&b=222
返回数据的时候，伪装成一个1*1像素的gif图片
10、如何结合 Google Analytic 搭建一个自定义日志采集系统？
前端：确定要采集的数据，以及采集的页面，以及埋点的js
后端：收集、设计、编写数据
11、采集的用户的访问数据例子及注意事项有哪些？
比如用户ip，用户所在的位置，用户访问时间，用户的url等的
服务器参数获取：有些能够通过服务器直接获取到：比如用户的访问时间，ip等
js获取：有些不能通过服务器获取到：可以考虑js，cookie等等，就是想办法拿全用户的数据
二、内容在总结中
转载于:https://www.cnblogs.com/Renyi-Fan/p/10965525.html
黑马大数据分析课程---1、大数据分析介绍相关推荐
- 炼数成金数据分析课程---7、数据分析简介
炼数成金数据分析课程---7.数据分析简介 一.总结 一句话总结: 我终于知道他们是要做一些什么样的工作了 1.我们导入了数据,是否可以立即进行数据分析? 需要对数据做预处理:比如去除脏数据这些 2. ...
- python数据分析课程哪个好-数据分析课程里面，python是重点！
原标题:数据分析课程里面,python是重点! 数据分析要学习什么内容呢?科多大数据带你一起来看看. IPython IPython 是一个在多种编程语言之间进行交互计算的命令行 shell,最开始是 ...
- 计算机九大核心课程,九大变化，透析IB（国际文凭）课程发展趋势
变化1:IBDP课程框架进行了学科群的较大调整.以计算机科学为例,新的课程框架将其从原先的第五学科群调整划分入第四学科群,与物理.化学.生物等学科组成新的科学学科群.这个调整意味着IB认为计算思维(C ...
- ZUCC_大数据计算技术_大作业
大数据计算技术大作业 课程名称 大数据计算技术 实验项目名称 大作业 项目目的 天气数据分析,通过网络爬虫(自己编写网络爬虫程序),网址:https://www.tianqi.com,点击" ...
- 大数据学习笔记—大数据概论
大数据概论 一. 大数据的概念 二.大数据的特点(4V) 三. 大数据的应用场景 四.大数据的发展前景 五.大数据部门的业务流程/组织结构 一. 大数据的概念 大数据(big data),指无法在一定 ...
- 开课吧python怎么样-廖雪峰官方大数据分析课程，第七期对外开放，前20名直降2000元！！！...
数据分析是程序员或者机器学习从业者最基本的一项技能,对数据进行掌握了解可以迅速抓住业务主线和数据特征! 关于数据分析的学习资料网上一抓一大把,但是一提项目实践,很多人表示手上没有数据源,不知道完整的一 ...
- 还在用Excel做数据分析？两大方法5分钟完成别人一天的工作
全世界只有3.14 % 的人关注了 青少年数学之旅 我是个只会用Excel的数据分析工作者.有一天,我和同事大鹏约好晚上一起喝酒,离下班还有5分钟,老板突然Q我: 我怀着忐忑的心情打开了一个神秘的压缩 ...
- 大数据挖掘课程案例资源介绍
大数据挖掘课程案例资源分为[基础]版,[进阶]版,不同阶段的课程难易程度不一样,对学生的基础知识掌握要求也不一样. [基础]Python编程基础 通过学习本 ...
- 大数据开发和大数据分析应该怎么选择？
其实两个方向都很可!主要还是看你个人的兴趣和未来的发展方向,下面给你罗列一下大数据开发和数据分析都是做什么的以及需要掌握哪些技能,然后你自己再选择一下喜好的方向~ 大数据开发主要是负责大数据挖掘,大数 ...
最新文章
- Python完全学习大师班
- Visual Studio Code为什么能这么牛X？
- 剑指offer——06旋转数组的最小数字（Python3）
- Windows Server查看和记录远程登录信息的方法
- 子类super调用父类函数，该函数中调用的函数是父类还子类呢
- 使用ModelArts自动学习完成猫狗声音分类
- JS调试的时候遇到无限debugger怎么办?
- SHELL字符串使用总结
- C++-string常用函数整理（建议收藏）
- android activitygroup tab,android 之用ActivityGroup 实现Tab分页
- 北京市小牛电动车选购指南
- JS的基本概念和语法
- function函数封装
- service worker使用
- java getdate和getday,Date类的getDay()和getDate()方法
- 对接飞鹅接口一直提示未注册
- 计算机连接公用网络受限,电脑连接无线网络受限怎么解决【解决方法】
- 电脑上的PDF文件太大了怎么办？
- 用java写一个汽车加油的程序_Java实现 LeetCode 134 加油站
- 工业环境下，嵌入式主板的选择要考虑哪些？