你知道吗？常用的数据挖掘分析工具Mahout和MLlib

传统的数据挖掘软件

专用挖掘工具、通用挖掘工具
–QUEST
–MineSet
–DBMiner
–Intelligent Miner
–SAS Enterprise Miner
–SPSS Modeler

大数据挖掘工具Mahout

Mahout 是Apache Software Foundation (ASF) 开发的一个开源项目
–目标是创建一些可伸缩的数据挖掘算法，供开发人员在Apache 在许可下免费使用。
–Mahout 包含许多实现，包括集群、分类、CF 和进化程序。
–此外，通过使用Apache Hadoop库，Mahout 可以有效地扩展到云中。

Mahout的意思是大象的饲养者及驱赶者。
–Mahout 这个名称来源于Hadoop徽标上的大象
–Mahout利用Hadoop来实现可伸缩性和容错性。

Mahout与Hadoop家族其他主要成员关系

大数据挖掘工具MLlib
MLlib是构建在Spark上的分布式数据挖掘工具，利用Spark的内存计算，和适合迭代型计算的优势，使性能大幅度提升。
•同时Spark算子丰富的表现力，让大规模数据挖掘的算法开发不再复杂
•MLlib作为Spark其中一部分，目前已经完全包含入Spark中。

数据挖掘框架(Spark MLlib)
•MLlib是Spark对常用的数据挖掘算法的实现库，同时包括相关的测试和数据生成器：
•MLlib目前支持多种常见的数据挖掘问题：
–二元分类、回归、聚类以及协同过滤，同时也包括一个底层的梯度下降优化基础算法。

你知道吗？常用的数据挖掘分析工具Mahout和MLlib相关推荐

【性能优化】MySQL常用慢查询分析工具
常用慢查询分析工具引言在日常的业务开发中 MySQL 出现慢查询是很常见的大部分情况下会分为两种情况 1.业务增长太快 2.要么就是SQL 写的太xx了所以对慢查询 SQL 进行分析和优化很 ...
运维工作常用的性能分析工具介绍
在运维工作中常用到的性能分析工具包括:vmstat.sar.iostat.netstat.free.ps.top.mpstat以及第三方开发工具,如:dstat.collectl及淘宝的开源监控项目t ...
大数据挖掘分析工具集
大数据时代需要大数据挖掘,我习惯把大数据分成四个领域:数据科学.网络科学.空间地理科学和可视化技术. 最近的主要兴趣在空间地理领域,学习如何获取POI,Polygon,经纬度,空间匹配算法和可视化,一 ...
Android 常用的性能分析工具详解：GPU呈现模式, TraceView, Systrace, HirearchyViewer（转）...
此篇将重点介绍几种常用的Android性能分析工具: 一.Logcat 日志选取Tag＝ActivityManager,可以粗略地知道界面Displaying的时间消耗.当我们打开一个Activit ...
[转]常用网络协议分析工具
1:TCPDUMP,老牌的分析工具,最先在linux平台使用,现在也可以用于windows平台.命令行方式,2000年以前参加工作者最喜爱的工具,缺点无法分析四层以上协议.常用于检测2-3层网络问题. ...
静态代码分析工具列表--常用静态代码分析工具介绍
代码检测简介本文是一个静态代码分析工具的清单,但是为公司产品需要付费使用.共有37个公司,有些公司包含多个工具.其中27个公司有多语言工具,1个公司为PHP工具.2个公司为.NET工具.1个公司为 ...
FISCO BCOS工程师常用的性能分析工具推荐
FISCO BCOS是完全开源的联盟区块链底层技术平台,由金融区块链合作联盟(深圳)(简称金链盟)成立开源工作组通力打造.开源工作组成员包括博彦科技.华为.深证通.神州数码.四方精创.腾讯.微众银行. ...
R语言的Rattle可视化BI数据挖掘分析工具
Rattle介绍 Rattle是一个免费的开源数据挖掘工具包, 使用 Gnome 图形界面以统计语言 R编写.它在GNU / Linux,Macintosh OS X和MS / Windows下运行. ...
常用服务器性能分析工具
"好记性不如烂笔头"很有道理,每一次遇到问题都是想不起来命令是啥,在这里记录一下下次方便找到! 1.top(查询进程内存.cpu占用情况) RES实际占用内存,%CPU为cpu使用 ...

你知道吗？常用的数据挖掘分析工具Mahout和MLlib

你知道吗？常用的数据挖掘分析工具Mahout和MLlib相关推荐

最新文章

热门文章