java客户端采集_java实现抽取采集数据的报表工具

该楼层疑似违规已被系统折叠隐藏此楼查看此楼

为什么需要数据采集

首先数据采集是在跨库查询能力之上的补充功能，在Smartbi V9的数据源管理中，用户可以通过上传文件(Excel、CSV、TXT)将本地原始数据补充到数据平台中，和其它企业内部数据(关系型数据)一起用于后续的语义层封装和关联查询。

但是在很多时候，分析人员甚至最终报表使用者会发现数据质量的问题，比如某产品的型号大小写不对造成无法合并统计、某客户的归属城市错误造成业绩计算错误......，如果没有数据采集能力就必须由技术人员通过关系数据库后台操作进行数据修改，从而引发一些安全性隐患。此外，企业用户可能会有一些临时性需要收集的数据，这些采集需求并不复杂且采集的数据仅仅用于数据关联分析，如果协调企业OA就会有些困难。这样就对BI系统自身的数据采集能力提出了需求。

数据采集的功能和亮点

Smartbi数据采集提供以下功能：

1、数据的修改和维护，开发人员设计可以修改数据的清单表，发布后最终用户在浏览器或者APP上直接修改并保存到数据库中；

2、数据的填写和采集，开发人员设计交叉表、表单或者问卷，发布后最终用户在浏览器或者APP上输入数据并保存到数据库中；

3、对已经有Excel模板(固定格式)的数据采集，可以设计Excel模板导入功能，直接将Excel中数据保存到数据库中；

其中前2种功能最常用，也是Smartbi数据采集的特色，采集的页面与修改数据的界面等同起来设计，看到的数据不正确就可以修改，而且即时生效无须等待。当然，这种具有回写(Write-back)功能的报表，是依赖预定义的资源权限的，以保证数据的安全性。

从回写报表设计上，同样基于Excel插件方式的电子表格，与中国式报表的设计没有任何区别，只是定义了“回写规则”，将单元格与数据库进行了映射，参考界面如下：

在回写定义中，可以指定数据回写的目标数据库和表，以及约定回写的内容只是用户修改过的，还有更新和插入的具体规则等。最终界面上的回写操作支持删除行、添加行、清空数据修改记录等。

此外，Smartbi数据采集还提供可回写单元格的填报属性，从源头管控数据质量，包括输入数据格式的校验、下拉选择列表的定义(支持Excel数据序列或者系统内置参数)、作为附件上传的文件规则等。如果你是高手，还可以使用“正则表达式”，更严格控制数据的输入质量。

java客户端采集_java实现抽取采集数据的报表工具相关推荐

java jdbc 批处理_Java JDBC批处理插入数据操作
在此笔记里,我们将看到我们如何可以使用像Statement和PreparedStatement JDBC API来批量在任何数据库中插入数据.此外,我们将努力探索一些场景,如在内存不足时正常运行,以及 ...
java 内存分布_java的各类型数据在内存中分配情况详解_
1. 有这样一种说法,如今争锋于IT战场的两大势力,MS一族偏重于底层实现,Java一族偏重于系统架构.说法根据无从考证,但从两大势力各自的社区力量和图书市场已有佳作不难看出,此说法不虚,但掌握Jav ...
数据蒋堂 | 报表工具的SQL植入风险
作者:蒋步星来源:数据蒋堂本文共2600字,建议阅读10分钟. 报表开发人员如何规避安全漏洞问题? 所有的报表工具都会提供参数功能,主要都是用于根据用户输入的查询条件来选取合适的数据.比如希望查询 ...
数据可视化报表工具的整体设计
在信息化的发展过程中不同的技术语言开发系统越来越多,基于可视化报表工具的二次开发系统是由于高效.及时.服务器维护方便.开发周期短的特点深受人们喜爱.因此,可视化报表工具在实践中越来越多,今天Smart ...
java 爬虫异步_Java 爬虫遇上数据异步加载，试试这两种办法！
这是 Java 爬虫系列博文的第三篇,在上一篇 Java 爬虫遇到需要登录的网站,该怎么办? 中,我们简单的讲解了爬虫时遇到登录问题的解决办法,在这篇文章中我们一起来聊一聊爬虫时遇到数据异步加载的问题 ...
JAVA异步爬虫_Java 爬虫遇上数据异步加载，试试这两种办法！
这是 Java 爬虫系列博文的第三篇,在上一篇 Java 爬虫遇到需要登录的网站,该怎么办? 中,我们简单的讲解了爬虫时遇到登录问题的解决办法,在这篇文章中我们一起来聊一聊爬虫时遇到数据异步加载的问题 ...
JAVA客户端数据传输_java模拟TCP通信实现客户端上传文件到服务器端
java模拟TCP通信实现客户端上传文件到服务器端,供大家参考,具体内容如下客户端 package com.zr; import java.io.FileInputStream; import ja ...
java connection 共享_java 使用HttpURLConnection发送数据简单实例
java 使用HttpURLConnection发送数据简单实例每个 HttpURLConnection 实例都可用于生成单个请求,但是其他实例可以透明地共享连接到 HTTP 服务器的基础网络.请求 ...
java数组重复_JAVA数组去除重复数据
一.用List集合实现 int[] str = {5, 6, 6, 6, 8, 8, 7,4}; List list = new ArrayList();for (int i=0; i list.ad ...

java客户端采集_java实现抽取采集数据的报表工具

java客户端采集_java实现抽取采集数据的报表工具相关推荐

最新文章

热门文章