linux中将hdfs数据导入hbase,将数据文件导入到HBase中

假设有一个TSV格式的数据文件test.dat(TSV是指数据文件中的每个字段是以制表符隔开的)

首先，将test.dat上传到hdfs上，具体的命令如下：

hadoop fs -copyFromLocal test.dat的路径名 /tmp/test.dat(/tmp是hdfs上的一个目录)

执行以下命令就可以查看hdfs上的tmp目录下是否有刚刚上传的文件

hadoop -fs ls /tmp

然后就可以用hbase中的命令接口将该数据导入到HBASE中已经建好的表中(假设建好的表是test,列族为Info)

注：test.dat中的数据存储格式是userid\tmusic\t\time\tnetid,以time为rowkey

bin/hbase org.apache.hadoop.hbase.mapreduce.ImportTsv -Dimporttsv.columns=info:userid,info:musicid,HBASE_ROW_KEY,info:netid test(HBASE的表明) /tmp/test.dat(hdfs文件路径)

linux中将hdfs数据导入hbase,将数据文件导入到HBase中相关推荐

用python写一个变声器，要求导入mp4或者mp3文件，将视频中的声音变成女声
用python写一个变声器,要求导入mp4或者mp3文件,将视频中的声音变成女声 1.安装 pydub 库 2.然后可以使用以下代码导入 mp4 或 mp3 文件并将其变成女声: 1.安装 pydub ...
php偷偷接受数据,拒绝人工新增单条数据，PHP实现读取文件导入数据
今天分享些php导入文件,读取数据,插入数据到数据库的代码,涉及的场景如下: 数据库表系统数据(如:省市区) 前端页面从文件导入数据,插入数据库(如:黑名单导入) 第一个是一个php的脚本代码,实现思 ...
Android 将MAP格式数据写入XML 将XMP文件读MAP数据格式中
其中涉及的部分类可以自行查询,如:AtomicFile.java FastXmlSerializer.java private static final String APPCONFIG_FILE ...
ixf文件 mysql导入,控制 PC/IXF 文件导入数据库的一般规则
IMPORT 实用程序仅接受 PC/IXF 格式文件 (IXFHID = 'IXF').不能导入其他格式的 IXF 文件. IMPORT 实用程序拒绝超过 1024 列的 PC/IXF 文件. 导出至 ...
oracle dump有条件导出导入，含参数文件导入导出
0. 准备: sys/passwd: system/oracle123schema/passwd: cloud/cloud123 1. 创建导出导入目录directory(使用) create or ...
navicat 导出的sql文件，再导入，运行SQL文件成功，数据库中却没有表
前些天发现了一个巨牛的人工智能学习网站,通俗易懂,风趣幽默,忍不住分享一下给大家.点击跳转到教程. 问题描述:本来在数据库上右键 ,运行SQL文件 ,就可以导入 sql ,建表成功,并且数据也该的. ...
hdfs如何查找指定目录是否文件_在shell中如何判断HDFS中的文件目录是否存在
原标题:在shell中如何判断HDFS中的文件目录是否存在在Linux文件系统中,我们可以使用下面的Shell脚本判断某个文件是否存在: # 这里的-f参数判断$file是否存在 if[ ! -f ...
Linux工作笔记-使用find和grep检索文件或子文件中是否包含指定字符串
目录概念演示概念 Linux中有一个find命令,可以用于查找文件名,使用grep命令,可以用于检索文件夹中的字符串,这两个命令配合起来,可以实现强大的功能. 其中grep中有一个 -i选项,是 ...
计算机用户导出导入,iTunes授权电脑文件导入导出图文教程
[绿茶教程]使用iTunes的用户都知道授权是有限制的,那么如何能突破这个限制呢?下面就和绿茶小编一起来学习下吧. 准备工作 2.下载分享者的授权文件,将分享者的授权文件放到软件目录下. 3.下载分享 ...

linux中将hdfs数据导入hbase,将数据文件导入到HBase中

linux中将hdfs数据导入hbase,将数据文件导入到HBase中相关推荐

最新文章

热门文章