hive指定hadoop执行队列

指定队列的命令：

有三种：

set mapred.job.queue.name=queue3;
SET mapreduce.job.queuename=queue3;
set mapred.queue.names=queue3;

老版本一般 mapred开头
新版本是mapreduce开头
老版本对应的新版本参数可以查出来

队列自己设定，

测试时注意

select * from tb 不会产生map reduce，只是加载后直接展示cat。
要想启动MR工程，必须指定列名:select  item1 from tb
就可以产生MR了

实例代码：

set mapred.queue.names=queue3;
select advertiser_id,crt_id,a.media,city,price, b.media_id, b.ratio
from tb_pmp_report_log_count a
left join mapping_tb_4_media_with_ratio b on (a.media = b.media)

转载于:https://www.cnblogs.com/cl1024cl/p/6205337.html

hive指定hadoop执行队列相关推荐

使用Hive或Impala执行SQL语句，对存储在HBase中的数据操作
https://www.zybuluo.com/aitanjupt/note/209941 使用Hive或Impala执行SQL语句,对存储在HBase中的数据操作〇.摘要一.基础环境二.数据存 ...
hive on tez 执行任务报错
hive on tez,在执行任务的时候报错,这种情况原因是container资源被抢占或者是资源不足.而task最大的失败次数默认是4,am自己失败的最大重试次数默认是2次. 报错日志: Verte ...
linux中用at命令5分钟后执行,我使用过的Linux命令之at - 在指定时间执行一次任务...
我使用过的Linux命令之at - 在指定时间执行一次任务用途说明 at命令用于在指定时间执行一次任务.如果任务需要重复执行,需用crontab. atq用于打印队列中的任务,atrm用于删除任务. ...
分布式定时任务原理以及解决方案-指定时间执行定时任务
分布式定时任务原理以及实现一.单机指定时间执行定时任务实现方式 Timer运行机制 ScheduledThreadPoolExecutor的运行机制原理图 Leader/Follower模式 Ti ...
Compound 治理——执行队列 TimeLock
简介对应的代码TimeLock.sol TimeLock.sol 直译为时间锁.其实是一个在solidity中实现的队列. 可以将代码加入队列,从队列中执行.执行方式为call调用.不支持重复调用, ...
读书笔记：为啥要有Hive？Hadoop上查询性能问题
因为提数需要用到Hive,于是阅读<Hive实战>,并整理成笔记, 下面是来自我:一个数据开发路人甲的理解,如何不当欢迎留言或私信. 1. 再认识Hadoop 粗略地说,Hadoop是针对 ...
【Linux 内核】实时调度类 ⑦ ( 实时调度类核心函数源码分析 | dequeue_task_rt 函数 | 从执行队列中移除进程 )
文章目录一.dequeue_task_rt 函数 ( 从执行队列中移除进程 ) 二.update_curr_rt 函数 ( 更新调度信息 ) 本篇博客中 , 开始分析 struct sched_cl ...
【Linux 内核】实时调度类 ⑥ ( 实时调度类核心函数源码分析 | 插入进程到执行队列 | 从执行队列中选择优先级最高的进程 )
文章目录一.enqueue_task_rt 函数 ( 插入进程到执行队列 ) 二.pick_next_task_rt 函数 ( 从执行队列中选择优先级最高的进程 ) 本篇博客中 , 开始分析 str ...
Hive和Hadoop及RDBMS关系
Hive 与 Hadoop 的关系 Hive利用HDFS存储数据,利用MapReduce查询分析数据 Hive与传统数据库对比 hive用于海量数据的离线数据分析总结:hive具有sql数据库的外表 ...

hive指定hadoop执行队列

指定队列的命令：

hive指定hadoop执行队列相关推荐

最新文章

热门文章