Storm计算结果是怎样存放的

Storm计算的结果存放在哪里？

刚開始接触Storm的时候。往往都会有这么一个疑问：“Storm处理后

的计算结果是保存在哪里呢？”是内存中还是在其他的地方？

官方给出的解释是：Storm不负责保存计算结果，计算结果由运算程序

来负责。假设数据不大，能够简单的保存在内存里。能够每次更新到数据库，

或者採用NoSQL来进行存储。Storm没有像s4那样提供一个Persist API。根

据时间或者容量来做存储输出。

这部分事情全然交给用户。相同。数据的展

现也须要用户自己来处理。Storm UI仅仅提供对topology的监控和统计。

转载于:https://www.cnblogs.com/brucemengbm/p/6855862.html

Storm计算结果是怎样存放的相关推荐

使用hive和sqoop来实现统计24小时每个时段的PV和UV,storm计算网站UV（去重计算模式）
[案例]使用hive和sqoop来实现网站基本指标,PV和UV 1.PV统计网页浏览总量 2.UV去重 ->[需求]统计24小时每个时段的PV和UV ->建分区表,按天一级,按小时一级,多 ...
storm计算网站UV（去重计算模式）
需求分析: UV统计方案分析: 1,传统的方式是把session_id放入Set实现自动去重,Set.size()获得UV,但是这种方式只能在单机上有效 2,可行的方案(类似WordCount的计算 ...
Storm 02_Storm 计算模型
一.Storm 计算模型 Topology – DAG有向无环图的实现对于Storm实时计算逻辑的封装即,由一系列通过数据流相互关联的Spout.Bolt所组成的拓扑结构生命周期:此拓扑只要启动 ...
42. 通俗易懂大数据实时计算Storm教程
目录前言 Storm基础 Storm到底是什么 mysql,hadoop与storm关系自己搞一套storm? storm的特点 Storm的集群架构以及核心概念 Storm的集群架构 Storm ...
Storm 流式计算框架介绍
文章目录 1.Storm简介 1.1 DAG(有向无环图) 1.2 Storm介绍 1.2.1 Storm 简介 1.2.2 Storm的优点 1.2.3 Storm的特性 1.3 Storm与Had ...
大数据计算的四支精干队伍，你造吗
本文首发在我简书的账号上,原文地址:http://www.jianshu.com/p/7a875e09d4e1 <易经·系辞>有云:"形而上者谓之道,形而下者谓之器". ...
[大数据计算基础] 大数据计算系统
大数据计算系统大数据计算框架的几个要素 : • 计算场景: 适用于何种任务使用? • 抽象:程序员看到的框架是什么样的? • API:程序员如何使用框架? • 系统架构:系统有哪些模块? • 基本数 ...
Apache Storm
一.概述 http://storm.apache.org/ Apache Storm是一款免费开源的分布式实时计算的框架(流处理) Apache Storm可以非常容易并且可靠的处理无界的流数据,进行 ...
用进化算法来优化SVM的参数C和Gamma——利用SCOOP库进行分布式加速计算
该案例展示了如何利用SCOOP库进行分布式加速计算Geatpy进化算法程序, 本案例和soea_demo6类似,同样是用进化算法来优化SVM的参数C和Gamma, 不同的是,本案例选用更庞大的数据集, ...

Storm计算结果是怎样存放的

Storm计算结果是怎样存放的相关推荐

最新文章

热门文章