Hive导入json文件

现有一json文件,需要导入hive,如何操作?
比如json内容如下

{"uid":"1","uname":"gaoyuanyuan","age":"18"}
{"uid":"2","uname":"gaojianzheng","age":"42"}

首先建表

drop table json1;
create table if not exists json1(
uid int,
uname string,
age int
)
row format serde 'org.openx.data.jsonserde.JsonSerDe'
stored as textfile
;

关键是引入处理json的包,这里不再是之前的类似下面这种

row format delimited
fields terminated by ','

- json serde 可以是自己写的jar包也可以是第三方的jar包
- 要把这种jar包添加到hive的class path中
- add jar ./data/json-serde-1.3-jar-with-dependencies.jar;

接下来就可以导入数据了

load data local inpath '/data/json1.json' into table json1;

查询测试

hive> select * from json1;
OK
1       gaoyuanyuan     18
2       gaojianzheng    42

总结

hive导入json文件,关键是
row format serde 'org.openx.data.jsonserde.JsonSerDe'

Hive导入json文件相关推荐

微信小程序云开发——常用功能2：操作云数据库一键批量导入数据（导入json文件）
微信小程序云开发--常用功能2:操作云数据库一键批量导入数据(导入json文件) 今天我们要添加100条数据.下面的过程是先创建一条记录,然后导出这条数据看json文件中是如何编辑字段的,然后仿照这个 ...
GameMaker如何导入JSON文件
众所周知,JSON(JavaScript Object Notation, JS对象简谱)是一种轻量级的数据交换格式.它基于 ECMAScript(European Computer Manufact ...
import引入json文件_在React组件中导入Json文件
我正在尝试在React组件中加载languages.json文件.当我想导入json文件时,我在第一步收到以下错误.这是错误: ERROR in ./app/languages.json Module ...
在PowerBI中导入JSON文件
某应用程序,用于管理其仓库中产品的发运和跟踪,该仓库将 NoSQL 数据库 CosmosDB 用作数据存储库. 此应用程序使用 Cosmos DB 存储 JSON 文档,这些文档采用公开的标准文件格 ...
Neo4j Desktop通过apoc 导入json文件
Neo4j Desktop通过apoc 导入json文件一.Apoc 安装(github) 1.安装 2.查看文件夹 3.修改neo4j.conf apoc.import.file.enabled= ...
Hive 导入CSV文件
SerDe 介绍 Hive 使用如下FileFormat 类读写 HDFS files: TextInputFormat/HiveIgnoreKeyTextOutputFormat: 读写普通HDFS ...
php导入json文件_[php]导入超大json文件
前言在之前的文章<做一个twitter的插件玩玩>中,我做了一个批量删除推文(转发推文)的工具,该工具能够删除前3200条推文,但因为总数太多(4.3万条),api接口不支持获取所有的推 ...
cratedb导入json文件
环境: OS:centos 7 db:3.2.0 1.准备数据文件 myuser.json文件内容如下: {"id": 1, "name": "foo ...
Hive导入csv文件
现有文件为csv格式,需要导入hive中,设csv内容如下 1001,zs,23 1002,lis,24 首先创建表 create table if not exists csv2(uid int,u ...

Hive导入json文件

总结

Hive导入json文件相关推荐

最新文章

热门文章