7.1.5、Sqoop__sqoop常用命令参数,import,export,hive,数据库连接,hbase等
1、数据库连接常用参数
1–connect | 连接关系型数据库的URL |
---|---|
2–password | 连接数据库的密码 |
3–username | 连接数据库的用户名 |
4–connection-manager | 指定要使用的连接管理类 |
5–driverHadoop | 根目录 |
6–help | 打印帮助信息 |
7–verbose | 在控制台打印出详细信息 |
2、导入工具import–常用参数
1–enclosed-by | 给字段值前加上指定的字符 |
---|---|
2–escaped-by | 对字段中的双引号加转义符 |
3–fields-terminated-by | 设定每个字段是以什么符号作为结束,默认为逗号 |
4–lines-terminated-by | 设定每行记录之间的分隔符,默认是\n |
5–mysql-delimitersMysql | 默认的分隔符设置,字段之间以逗号分隔,行之间以\n分隔,默认转义符是\,字段值以单引号包裹。 |
6–optionally-enclosed-by | 给带有双引号或单引号的字段值前后加上指定字符。 |
7–table | 关系数据库中的哪张表 |
8–m | map的个数 |
9–split-by | 以什么做切分分到map中数据 |
10–target-dir | hdfs上的路径 |
11–delete-target-dir | hdfs上存在路径自动删除 |
12–direct | 直接导入方式,优化mysql速度 |
3、导出工具export–常用参数
1–input-enclosed-by | 对字段值前后加上指定字符 |
---|---|
2–input-escaped-by | 对含有转移符的字段做转义处理 |
3–input-fields-terminated-by | 字段之间的分隔符 |
4–input-lines-terminated-by | 行之间的分隔符 |
5–input-optionally-enclosed-by | 给带有双引号或单引号的字段前后加上指定字符 |
4、Hive参数–常用
1–hive-import | 将数据从关系数据库中导入到hive表中 |
---|---|
2–hive-partition-key | 创建分区,后面直接跟分区名,分区字段的默认类型为string |
3–hive-overwrite | 覆盖掉在hive表中已经存在的数据 |
4–create-hive-table | 默认是false,即,如果目标表已经存在了,那么创建任务失败 |
5–hive-table | 后面接要创建的hive表,默认使用MySQL的表名 |
6–hive-database | hive表所在的库 |
5、Hbase参数–常用
1–hbase-table | hbase中的表名 |
---|---|
2–hbase-create-table | |
3–hbase-row-key | hbase的row key |
4–column-family | hbase表的列簇 |
7.1.5、Sqoop__sqoop常用命令参数,import,export,hive,数据库连接,hbase等相关推荐
- HDFS命令行客户端使用,命令行客户端支持的命令参数,常用命令参数介绍
3.HDFS的shell(命令行客户端)操作 3.1 HDFS命令行客户端使用 HDFS提供shell命令行客户端,使用方法如下: [toto@hadoop hadoop-2.8.0]$ hdfs d ...
- dpkg命令用法、Ubuntu下deb包的解压、打包、安装、卸载及常用命令参数
dpkg命令的用法 不带图简装:https://blog.csdn.net/wanghuohuo13/article/details/78916821?ops_request_misc=&re ...
- FFmpeg常用命令参数
FFmpeg常用命令参数 陈拓 2021/08/31-2020/09/01 1. 视频文件转gif图像 命令格式: ffmpeg -ss 5 -t 10 -i input.mp4 -y -s 640x ...
- JVM 调优实战--常用命令参数及PS收集器的GC日志格式
目录 了解JVM常用命令行参数 Parallel Scavenge(PS)的GC日志格式 了解JVM常用命令行参数 JVM的命令行参数参考:https://docs.oracle.com/javase ...
- Hadoop常用命令参数介绍
常用命令 - help 功能:输出这个命令参数手册 - ls 功能:显示目录信息 示例:hadoop fs -ls hdfs://hadoop-hello/ 备注:这些参数中,所有的hdfs路径都可以 ...
- tmail.exe 及其他常用命令参数
一.tmail.exe 1,直达短信收件箱: 命令参数:"/Windows/tmail.exe"-service "SMS" ("SMS"前 ...
- gcc编译c文件常用命令参数解释
gcc编译c文件 gcc是常用来编译c语言程序的编译器,了解它编译c语言的命令参数,对c/c++语言的学习是有一定好处的. gcc编译文件一步到位的命令格式 gcc main.c -o main.ex ...
- linux 常用命令参数集合(二)
54.fdisk fdisk:磁盘分区 fdisk /dev/sda p:显示当前磁盘上的分区 n:创建一个新的分区 ...
- 第五章 Mininet常用命令参数介绍
mn 观察,可以知道,已经进入了这个自带的网络,网络中有1个交换机和2个主机,且在打开这个网络之后,进入了 mininet> 这个命令模式 然后输入相关命令查看网络状态,如下图所示: 查看可 ...
最新文章
- python 鼠标键盘操作 pyautogui
- Android O 新特性 — Notification
- win7虚拟磁盘服务器,Win7系统如何删除虚拟磁盘 win7系统删除虚拟磁盘的方法
- cups支持的打印机列表_网络存储让你的打印机瞬间变无线,打印文件不用愁
- expo运行android studio,一、用Expo开发react-native :快速开始
- 基于JAVA+SSH+MYSQL的水果商城系统
- python多线程是假的!速度慢!效率低下!不升反降!
- ps cc2019版为什么做图一复制图层就卡死_彻底明白PS的智能对象,它和普通图层到底有啥区别?详细讲解...
- mongoose schema Schema hasn't been registered for model
- 电商的运营模式流程(最全解析电商运营模式)
- MATLAB2018a解压文件损坏,文件解压失败与压缩文件文件已经损坏的解决办法
- 全国大学生大数据技能竞赛比赛心得以及相关资料
- Confluence(wiki)配置数据库及修改数据库地址
- 怎么把小丑的可怕和疯狂表现出来
- mysql子查询返回多于1行_mysql – 子查询返回超过1行
- 如何装配一台计算机和安装操作系统,组装机怎么安装系统?手把手教你组装机安装系统教程...
- Java虚拟机(一)Java虚拟机初步了解
- 【前端:css画三角形】
- Python基础学习第三天——条件控制与while循环语句
- android屏幕解锁图案,安卓手机图案屏幕锁解锁方法!!