对软件行业的理解

可以用需求、架构、工具和算法四个词对软件行业做一个整体的概括。

需求是推动软件行业发展的源动力,需求的变化带来了架构、工具和算法的进步。

架构这个层面上,主要涉及的是一种解决问题的思想和策略,好的架构的诞生源于对需求和技术的深入了解,但与具体的技术实现联系不是太紧密。

工具是有需求带动的,工具的产生会受到架构的限制,不同的工具一般对某一领域更擅长。

算法的进步依赖于基础学科,是对具体问题的优化处理。

总之,无论是需求、架构、工具,还是算法,很少出现跳跃性的进步和创新,大多是在以前的基础上做改进。

对大数据的理解

大数据的HDFS(分布式文件系统)实际上就是在Linux文件系统之上安照其文件系统的原理又实现了一遍文件系统,并且加入了网络相关内容的处理。这也是为什么理解、熟悉Linux文件系统的实现细节对大数据的学习很有帮助的原因。

如果不考虑每个节点主机的运算能力的话,HDFS管理的就是一个磁盘阵列。加上并行运算技术以后,各个节点主机的运算能力利用起来了,就逐渐演变成了现在的Hadoop。

从以上来看,大数据没有多少新东西,最关键的还是机器学习部分。这才是在大数据领域保持向上发展的决定部分。

By印臣

转载于:https://blog.51cto.com/liyinchen/1910072

我对软件行业及大数据的理解相关推荐

  1. 软件开发向大数据开发过渡_如果您是过渡到数据科学的开发人员,那么这里是您的最佳资源...

    软件开发向大数据开发过渡 by Cecelia Shao 邵Ce It seems like everyone wants to be a data scientist these days - fr ...

  2. (上)挖掘传统行业日志大数据的无限价值

     
 8 月 27 日晚上八点,七牛云高级解决方案架构师程雪松在 IT 大咖说进行了题为<挖掘传统行业日志大数据的无限价值>的直播,对传统行业运维常见困境和统一日志管理的必要性进行了深入 ...

  3. (下)挖掘传统行业日志大数据的无限价值

     8 月 27 日晚上八点,七牛云高级解决方案架构师程雪松在 IT 大咖说进行了题为<挖掘传统行业日志大数据的无限价值>的直播,对传统行业运维常见困境和统一日志管理的必要性进行了深入解析 ...

  4. 软件开发向大数据开发过渡_如何过渡到开发人员关系职业

    软件开发向大数据开发过渡 假设您已经找到了一个自己真正喜欢的开源项目,并且您想做的不仅仅是贡献. 或者您喜欢编码,但是您不想花一生的时间与计算机进行交互,而不是与人进行交互. 您如何将对开源软件的热爱 ...

  5. 英特尔展示体育行业与大数据技术应用

    ZDNet至顶网服务器频道 06月19日 新闻消息: 为解析体育领域大数据的创新应用模式.进一步挖掘和验证大数据推动社会和经济发展的价值,主题为"赛场内外大数据 商业变革芯洞察"的 ...

  6. 证券期货行业监管大数据治理方案研究

    证券期货行业监管大数据治理方案研究 蒋东兴1, 高若楠2, 王浩宇2 1. 中国证券监督管理委员会信息中心,北京 100033: 2. 中证信息技术服务有限责任公司,北京 100033 摘要:为充分发 ...

  7. 作者:石在辉(1983-),男,中移(苏州)软件技术有限公司大数据产品部方案架构师。...

    石在辉(1983-),男,中移(苏州)软件技术有限公司大数据产品部方案架构师,主要从事解决方案.战略规划.产品规划等工作.

  8. 1. 拼多多什么软件可以看到大数据?拼多多大数据分析软件有哪些?

    对拼多多的商家来说,数据化分析运营店铺是十分重要的,那么拼多多什么软件可以看到大数据?拼多多大数据分析软件有哪些? 多多昇华,作为一款拼多多数据分析软件,可以为卖家提供行业分析.竞品分析和店铺监控.热 ...

  9. 多多情报通:拼多多什么软件可以看到大数据?拼多多大数据分析软件有哪些?

    对拼多多的商家来说,数据化分析运营店铺是十分重要的,那么拼多多什么软件可以看到大数据?拼多多大数据分析软件有哪些? 多多情报通,作为一款拼多多数据分析软件,可以为卖家提供行业分析.竞品分析和店铺监控. ...

最新文章

  1. 神经网络 debug 太难了,这里有六个实用技巧
  2. P1215 母亲的牛奶
  3. 为什么采用4~20mA的电流来传输模拟量?
  4. 微服务架构 — 微服务框架
  5. Python爬取房天下租房信息实战
  6. JS 小数的常用处理方法
  7. jquery常见操作分享
  8. DL中常用的numpy
  9. 南大首届AI本科课程曝光:周志华为第一批00后,准备了大剂量烧脑数学
  10. ERP和SAP是什么意思?
  11. 10. InnoDB表空间加密
  12. IE:免去脱机浏览中的麻烦(转)
  13. win10右键删除多余菜单
  14. vivado_hls 与 modelsim 联合仿真时报错,Failed to access library ‘unisims_ver‘ at “unisims_ver“
  15. 关掉该死的DEP(数据执行保护,仅针对win7)
  16. 认知仿真:是复杂系统建模的新途径吗
  17. Enterprise Architect教程
  18. android 系统 优化设置,优化设置 让你的Android手机快人一步
  19. python画风景图_风景侠
  20. 大数据_01【介绍】

热门文章

  1. gcc 常用命令(逐渐完善)
  2. Apache Beam和BigQuery的错误处理(Java SDK)
  3. 程序员的魔法——用Masking GAN让100,000人都露出灿烂笑容
  4. Swift: 可变参数
  5. redis 集合操作
  6. HDU 2040:亲和数
  7. redis transaction和connection命令操作
  8. Couchbase 集群小实践
  9. Cvmat IplImage
  10. Visual Studio 2010 Ultimate敏捷功能特性(下)