我对软件行业及大数据的理解
对软件行业的理解
可以用需求、架构、工具和算法四个词对软件行业做一个整体的概括。
需求是推动软件行业发展的源动力,需求的变化带来了架构、工具和算法的进步。
架构这个层面上,主要涉及的是一种解决问题的思想和策略,好的架构的诞生源于对需求和技术的深入了解,但与具体的技术实现联系不是太紧密。
工具是有需求带动的,工具的产生会受到架构的限制,不同的工具一般对某一领域更擅长。
算法的进步依赖于基础学科,是对具体问题的优化处理。
总之,无论是需求、架构、工具,还是算法,很少出现跳跃性的进步和创新,大多是在以前的基础上做改进。
对大数据的理解
大数据的HDFS(分布式文件系统)实际上就是在Linux文件系统之上安照其文件系统的原理又实现了一遍文件系统,并且加入了网络相关内容的处理。这也是为什么理解、熟悉Linux文件系统的实现细节对大数据的学习很有帮助的原因。
如果不考虑每个节点主机的运算能力的话,HDFS管理的就是一个磁盘阵列。加上并行运算技术以后,各个节点主机的运算能力利用起来了,就逐渐演变成了现在的Hadoop。
从以上来看,大数据没有多少新东西,最关键的还是机器学习部分。这才是在大数据领域保持向上发展的决定部分。
By印臣
转载于:https://blog.51cto.com/liyinchen/1910072
我对软件行业及大数据的理解相关推荐
- 软件开发向大数据开发过渡_如果您是过渡到数据科学的开发人员,那么这里是您的最佳资源...
软件开发向大数据开发过渡 by Cecelia Shao 邵Ce It seems like everyone wants to be a data scientist these days - fr ...
- (上)挖掘传统行业日志大数据的无限价值
 8 月 27 日晚上八点,七牛云高级解决方案架构师程雪松在 IT 大咖说进行了题为<挖掘传统行业日志大数据的无限价值>的直播,对传统行业运维常见困境和统一日志管理的必要性进行了深入 ...
- (下)挖掘传统行业日志大数据的无限价值
 8 月 27 日晚上八点,七牛云高级解决方案架构师程雪松在 IT 大咖说进行了题为<挖掘传统行业日志大数据的无限价值>的直播,对传统行业运维常见困境和统一日志管理的必要性进行了深入解析 ...
- 软件开发向大数据开发过渡_如何过渡到开发人员关系职业
软件开发向大数据开发过渡 假设您已经找到了一个自己真正喜欢的开源项目,并且您想做的不仅仅是贡献. 或者您喜欢编码,但是您不想花一生的时间与计算机进行交互,而不是与人进行交互. 您如何将对开源软件的热爱 ...
- 英特尔展示体育行业与大数据技术应用
ZDNet至顶网服务器频道 06月19日 新闻消息: 为解析体育领域大数据的创新应用模式.进一步挖掘和验证大数据推动社会和经济发展的价值,主题为"赛场内外大数据 商业变革芯洞察"的 ...
- 证券期货行业监管大数据治理方案研究
证券期货行业监管大数据治理方案研究 蒋东兴1, 高若楠2, 王浩宇2 1. 中国证券监督管理委员会信息中心,北京 100033: 2. 中证信息技术服务有限责任公司,北京 100033 摘要:为充分发 ...
- 作者:石在辉(1983-),男,中移(苏州)软件技术有限公司大数据产品部方案架构师。...
石在辉(1983-),男,中移(苏州)软件技术有限公司大数据产品部方案架构师,主要从事解决方案.战略规划.产品规划等工作.
- 1. 拼多多什么软件可以看到大数据?拼多多大数据分析软件有哪些?
对拼多多的商家来说,数据化分析运营店铺是十分重要的,那么拼多多什么软件可以看到大数据?拼多多大数据分析软件有哪些? 多多昇华,作为一款拼多多数据分析软件,可以为卖家提供行业分析.竞品分析和店铺监控.热 ...
- 多多情报通:拼多多什么软件可以看到大数据?拼多多大数据分析软件有哪些?
对拼多多的商家来说,数据化分析运营店铺是十分重要的,那么拼多多什么软件可以看到大数据?拼多多大数据分析软件有哪些? 多多情报通,作为一款拼多多数据分析软件,可以为卖家提供行业分析.竞品分析和店铺监控. ...
最新文章
- 神经网络 debug 太难了,这里有六个实用技巧
- P1215 母亲的牛奶
- 为什么采用4~20mA的电流来传输模拟量?
- 微服务架构 — 微服务框架
- Python爬取房天下租房信息实战
- JS 小数的常用处理方法
- jquery常见操作分享
- DL中常用的numpy
- 南大首届AI本科课程曝光:周志华为第一批00后,准备了大剂量烧脑数学
- ERP和SAP是什么意思?
- 10. InnoDB表空间加密
- IE:免去脱机浏览中的麻烦(转)
- win10右键删除多余菜单
- vivado_hls 与 modelsim 联合仿真时报错,Failed to access library ‘unisims_ver‘ at “unisims_ver“
- 关掉该死的DEP(数据执行保护,仅针对win7)
- 认知仿真:是复杂系统建模的新途径吗
- Enterprise Architect教程
- android 系统 优化设置,优化设置 让你的Android手机快人一步
- python画风景图_风景侠
- 大数据_01【介绍】