这一论断听上去好像异端邪说,不是吗?现在的管理教育大都是对人们判断力的培养——也就是培养未来领导者“模式匹配”(pattern-matching)的能力,采用的手段通常是让他们接触大量的案例研究和其他类型的例证,以便让他们充满信心地游走在商界江湖。无论是否在商学院,人们总是告诉我们,要相信自己的本能和直觉,尤其在身经百战之后,我们完全可以靠本能和直觉在一眨眼的功夫就做出精准的判断。

但在当今的商业世界中(或许在其他领域也一样),这却是最有害的错误观念。正如我在以前的文章中写到的,人类的直觉很重要不假,但也是有缺陷的。就决定让哪些囚犯回家而言,假释裁决委员会的判断远不如简单的规则。在诊断乳腺癌方面,训练有素的病理学家的结论也比不上影像分析软件的结果。采购专业人员对哪些供应商将来表现出色的判断,远不如一种简单算法的预测更准确。美国顶尖级的法律学者对某一年最高法院判决投票结果的预测,也远远不如数据驱动型的决策规则更精准。

这样的名录我可以一直罗列下去,不过,我还是把最后一句话留给心理学家保罗·米尔(Paul Meehl)吧。早在近60年前,他就开始研究“专家”与算法孰优孰劣的问题了。他在职业生涯即将结束的时候曾总结说:“无可争议的是,社会科学的研究表明,数量众多的各种研究结果均指向了同一个方向,那就是:在从足球比赛的结果到肝病诊断的诸多预测中,你很难找出几个预测的结果是对专家和临床医生有利的,我们就此完全可以得出切合实际的结论。”

这个结论就是,我们应该将我们的很多决策、预测、诊断和判断交给算法,无论是无关紧要还是至关重要的事情。就算法是否能给我们提供更好的结果而言,已经是毫无争议的问题了。

当我们为专家呈上这样的事实时,他们的典型回应往往是“我知道数据和分析很重要,这也是我做出决策时要考虑它们的原因所在”。这种说法听上去很有道理,但实际上却大错特错了。研究同样清楚地表明:当专家把自己的判断添加到数据驱动型的算法或数学模型的结果中时(换句话说,当他们做出事后评价时。),最终结果往往比只用算法本身得出的结果糟糕。正如社会学家克里斯·斯尼德斯(Chris Snijders)所说的:“你看的结果往往是,专家参与的判断会介于模型单独判断和专家单独判断的结果之间。所以说,如果给他们提供模型,专家的判断结果会更好些,但依然不如模型独自判断的表现。”

而当我们把这个次序倒转过来的时候,也就是让专家为模型提供信息而不是相反的时候,结果则会好得多。如果专家的主观意见被量化,并添加到某一算法之中,其结果往往会得到提升。所以,病理学家对癌症病程的估计可以添加到影响分析软件的分析过程中,法律学者对最高法院对案件投票的预测也可以改善模型的预测能力。伊恩·艾瑞斯(Ian Ayres)在其卓越的著作《超级数字天才》(Supercrunchers)中曾写道:“不是让统计数据充当专家的仆人,而要让专家成为统计机器的侍从。”

当然,大多数组织都无法轻松完成这一转变。现如今,大部分决策者都确信自己很擅长此道,自己的决策毫无疑问要比没有灵魂、简单朴素的算法做出的决策更好,此外,他们还认为,拿走他们的决策权会削弱自己的权威、降低自己的价值。但显而易见的是,第一种观念是错误的,第二种认识也同样谬之千里。

那么,如何实现专家与算法之间角色的大逆转呢?倚重数据驱动型的决策过程,会让我们的组织、经济和社会因此而得到更好的结果吗?达到这样的目标需要透明、时间和对结果的认识,在这里,透明是指清楚说明“专家”的判断有多么糟糕,时间是指让这种理念广泛传播并得到充分理解,对结果的认识则能让我们为了得到更好的决策而愿意忍受这一艰难的转变。

在假释裁决委员会的例证中,我们能看到所有这三个因素的存在。正如艾瑞斯谈到的:“在最近25年中,18个州用量刑指南(sentencing guidelines)取代了假释制度。这些州在评估再犯的风险时已越来越倚重算法评估模型。

对投票者来说,糟糕的假释决定会产生严重的后果,所以,人为把握判断原则的假释裁决委员会乐得将投票权拱手相让。而在商业世界中,竞争,尤其是来自数据驱动型竞争对手的压力,会让略逊一筹的决策者举步维艰。我不知道多久会出现这种结果,但我可以信心十足地说,数据驱动型的企业,会从依然过度倚重专家的企业那里夺走更多的市场份额、客户和利润。

本文作者:佚名

来源:51CTO

大数据挑战:敢不敢不要加入人的判断?相关推荐

  1. 大数据 挑战 机会_大数据可视化面临哪些挑战

    数据可视化在大数据场景下面临诸多新的挑战,包括数据规模.数据融合.图表绘制效率.图表表达能力.系统可扩展性.快速构建能力.数据分析与数据交互等. 数据规模 大数据规模大.价值密度降低,受限于屏幕空间, ...

  2. 国家统计局举办开放日 称将迎接“大数据”挑战

    第四届"中国统计开放日"活动12日在京举行.国家统计局通过图文陈列.视频回顾.操作演示.现场问答.网络互动等形式,向中外媒体记者.网友.企业和基层统计人员,外国专家,美国和韩国驻华 ...

  3. 内存计算技术应对大数据挑战

    访SAP张志琦的过程中涉及到以下内容: 数据的"失控" 前言 时间快转,又到了岁末年初盘点之时. 2012年,不仅是末日之年,也是变革之年. 深刻的变化正在发生,而这将彻底改变人的 ...

  4. 年服务人次3300万+,网鱼网咖的大数据挑战及架构

    11+大数据行业应用实践请见https://yq.aliyun.com/activity/156,同时这里还有流计算.机器学习.性能调优等技术实践.此外,通过Maxcompute及其配套产品,低廉的大 ...

  5. 如何解读「量子计算应对大数据挑战:中国科大首次实现量子机器学习算法」?——是KNN算法吗?...

    作者:知乎用户 链接:https://www.zhihu.com/question/29187952/answer/48519630 我居然今天才看到这个问题,天--本专业,有幸听过他们这个实验的组会 ...

  6. 保险公司“大都会人寿”以新兴企业态度应对大数据挑战

    大都会人寿是一家规模庞大的保险企业,在跨越美洲.欧洲以及亚洲的庞大市场当中拥有超过9000万客户.不过在本周三于纽约市举办的Gigaom Structure Data大会的舞台上,该公司区域应用程序开 ...

  7. 大数据、人工智能的出现给每个人造成的影响居然那么大!这是程序员的福音......

    <人类简史>作者尤瓦尔·赫拉利说:"人类从来没有做过什么自由的选择,你听从内心想法做出的一切选择,都是经过生物计算输出的结果." 找对象,看大数据 我们往往在做出决定的 ...

  8. 大数据杀熟又来了?千人千面的个性化推荐,你喜欢吗?

    导读:近日某著名电商再次被质疑大数据杀熟,有用户在社交媒体晒出截图,指出某款商品的付费会员价格竟然高于普通用户.随后该电商回应称,价格差异是为新用户提供首单专享价所导致,并非杀熟,已解决这个问题. 大 ...

  9. 从事大数据开发工作需要什么性格的人

    从事大数据开发工作的人通常需要具备以下性格特点: 具有较强的学习能力,能够不断学习新的技术和工具,满足不断变化的工作需要. 具有较强的分析和解决问题的能力,能够结合实际情况,分析和解决工作中遇到的各种 ...

  10. 关于大数据与机器学习,小白和牛人之间15个典型问答精华整理上篇

    问:不同的语言在数据处理以及算法计算过程中性能的差别是否很大? 答:就目前的经验来看,使用C或者C++的效率确实要比PYTHON高一些,但是没有差到一个数量级的差别.PYTHON程序的维护成本比C或C ...

最新文章

  1. 【错误记录】Android Studio 编译报错 ( Gradle 下载错误导致 Failed to open zip file 报错 )
  2. 华为交换机同步linux时间服务器,华为s5720s系列交换机同步时间
  3. Java中关于String类型的10个问题
  4. 开发VR游戏的基本要求
  5. Recovering deleted Records
  6. 25.C++- 泛型编程之函数模板(详解)
  7. 初学Go语言的学生管理系统
  8. 工作日历计划javaweb_将你的日历与 Ansible 集成,以避免与日程冲突 | Linux 中国...
  9. 黑客在数十个 WordPress 插件和主题中插入秘密后门,可发动供应链攻击
  10. python闭包和函数调用区别_python – 函数闭包与可调用类
  11. java正则匹配买火车票_matlab的正则表达式
  12. ASA k8 升 k9
  13. Docker(从入门到部署微服务集群)
  14. IDEA自带的逆向工程功能
  15. 计算机sumifs函数怎么操作,excel中SUMIFS函数的公式语法及使用方法教程
  16. SQL Server 错误:尝试打开或创建物理文件时,CREATE FILE 遇到操作系统错误
  17. WEB前端打印使用记录
  18. Chapter9 : De Novo Molecular Design with Chemical Language Models
  19. 输入框输入手机号并匹配历史记录
  20. 欢迎访问我的个人网站!

热门文章

  1. javascript 正则表达式学习
  2. 光在参与介质中的传播及辐射传递方程
  3. 第一百六十四节,jQuery,常规选择器
  4. python基本数据类型——set
  5. [转帖]我们是OIer、
  6. 节点文件将两个不同格式的XML文件,进行节点对照,并生成一个用于对照功能的XML...
  7. 过滤器如何配置(javax.servlet.Filter)?
  8. repeater 的编辑功能
  9. Java 软件实践 VZone PPT Show 一次及其Perfect的演示
  10. linux(Centos7系统)中安装JDK、Tomcat、Mysql