报错背景

版本

从百度预编译版v0.13.15至v0.14.12.7都有这个问题
doris 表导入至hive,采用doris的export

70多G的数据表
单分区
150桶
三副本
共3*150个tablet

export任务参数
“timeout” = “3600”
“tablet_num_per_task”=“1”

{“partitions”:["*"],“exec mem limit”:2147483648,“column separator”:"\t",“line delimiter”:"\n",“tablet num”:150,“broker”:“hdfs_broker”,“coord num”:150"}

报错内容

凌晨的export任务概率性的cancelled

show export order by createtime desc;

ErrorMsg显示
type:RUN_FAIL; msg:export exporting job fail. query id: bc2db4bd87dc4893-b40d4025438e10e7, Failed to get query fragments context. Query may be timeout or be cancelled. host:

日志跟踪

fe-master节点日志

根据JobId搜索日志最底下

process 14%失败

往上翻

fe日志这里,
deregister query id bc2db4bd87dc4893-b7a6d8b0d6db5339
unfinished instance: bc2db4bd87dc4893-b7a6d8b0d6db533a

第一次的bc2db4bd87dc4893-b7a6d8b0d6db5339的bc2db4bd87dc4893-b7a6d8b0d6db533a执行失败然后cancel了,
后面又重新注册
register query id = bc2db4bd87dc4893-b40d4025438e10e7,
然后fragment分发给一个be
dispatch load job: bc2db4bd87dc4893-b40d4025438e10e7 to [TNetworkAddress(hostname:be-xx, port:9060)]

但是他直接就exec plan fragment failed了

exec plan fragment failed, errmsg=Failed to get query fragments context. Query may be timeout or be cancelled. host: , code: INTERNAL_ERROR, fragmentId=F43, backend=be-xx:9060

be节点日志

第一次bc2db4bd87dc4893-b7a6d8b0d6db5339这个job到be后,
他的instance
bc2db4bd87dc4893-b7a6d8b0d6db533a失败了
报错
bc2db4bd87dc4893-b7a6d8b0d6db533a: Thrift rpc error: Fail to write to broker, broker:TNetworkAddress(hostname=broker-xx, port=8000) failed:THRIFT_EAGAIN (timed out)
fe中重新第二次尝试的bc2db4bd87dc4893-b40d4025438e10e7的instance任务
bc2db4bd87dc4893-b40d4025438e10e8
也返回了reason 3
reason:3是有特殊含义嘛
查阅be代码

broker日志


2021-08-05 14:18:06 [ pool-2-thread-20:604944856 ] - [ INFO ] receive a open writer request,

2021-08-05 14:18:26 [ pool-2-thread-20:604965097 ] - [ WARN ] Error closing output stream.
java.net.SocketException: Socket closed

一段时间(10s)关闭了
然后将"tablet_num_per_task"="1"改为5后
这里用了120s关闭.

分析

跟我之前碰到的这个类似,但是日志略有不同

Doris export任务概率性cancelled第二种情况相关推荐

  1. 前端学习(561):解决margin重叠第二种情况父子

    第一种方法 第二种方法 第三种方法 第四种方法 第五种方式

  2. Redo丢失的4种情况及处理方法

    Redo丢失的4种情况及处理方法  转载:http://blog.itpub.net/23135684/viewspace-626935/ 一.说明: 1.以下所说的当前日志指日志状态为CURRENT ...

  3. 野指针出现的三种情况

    昨天面试被问到"你了解野指针吗",我的回答是"野指针就是没有初始化的指针,这样的指针会随机指向一块内存,野指针会对系统造成破坏(造成内存泄漏)".面试官又问到, ...

  4. Android --- android.intent.action.MAIN 与 android.intent.category.LAUNCHER常用的几种情况

    第一种情况: 有MAIN,无LAUNCHER,程序列表中无图标 原因:android.intent.category.LAUNCHER决定应用程序是否显示在程序列表里 第二种情况: 无MAIN,有LA ...

  5. 【重复提交表单】表单重复提交的三种情况,解决办法

    引入 看一个重复提交表单的例子 F12可以看到,请求体中的参数在刷新页面之后仍然保留,因此每一次刷新页面,都会把现有的请求体中的表单数据提交一次到服务器,而接收的页面还是insert.jsp,于是造成 ...

  6. Verilog HDL中容易生成锁存器的两种情况

    在Verilog HDL的程序设计中,有两种情况会生成锁存器. 第一种情况 在always块中使用if语句,但是没有else,这会导致当条件不成立时,没有其他语句可执行,使得被赋值的寄存器一直保持不变 ...

  7. try catch finally 中包含return的几种情况,及返回结果

    第一种情况:在try和catch中有return,finally中没有return,且finally中没有对try或catch中要 return数据进行操作的代码,这种情况也是最好理解的. publi ...

  8. z-index失效的几种情况,父标签position属性为relative的时候,详解

    网上对这一方面解释的很多,我也不想把别人的抄过来.在这里是加上我对这些情况的理解还有我的一些疑惑,若有问题,请留言,谢谢!!!话不多说,进入正题: 文章重点:z-index失效的一类情况:父标签pos ...

  9. 占用80端口的几种情况及解决方法

    首先,我们要看怎么80端口是否被占用: 点击电脑左下角的 输入cmd , 回车,然后输入netstat -ano|findstr "80"  然后回车(注意,-ano后面是一个竖杠 ...

  10. java找不到java.dll(两种情况)

    第一种情况: Windows键+R打开运行框输入cmd 输入Java后找不到Java.dll 直接附图 这种情况所遇到的问题分两种情况: 1.由于之前安装的jdk未卸载干净,重新装了新的版本,版本之间 ...

最新文章

  1. python爬虫在哪里学_学完了python基础想学习python爬虫从哪里学起呢?
  2. Oracle11g远程连接配置 visual studio 2003
  3. 透明的WinForm窗体
  4. 边缘计算时代来了,你准备好了吗?
  5. 巧用TreeSet求解第k小整数(洛谷P1138题题解,Java语言描述)
  6. 专心写即时通讯软件争取CSDN认证专家
  7. libuv tcp client
  8. java运行指定文件_java打开指定文件(运行指定程序exe)
  9. 视频出炉 | LeCun、Marcus激辩AI是否需要类似人类的认知能力
  10. linux alias别名管理
  11. LIS和LCS LCIS
  12. 从重大事件保障,看华为如何打造一流保障体系
  13. 知其然知其所以然 itoa实现 整型转字符串
  14. c# 软件单元测试,单元测试(C#版)
  15. 苹果延长13英寸MacBook Pro背光维修计划
  16. 我的黑马生涯——真实黑马学员感言
  17. python write函数输出字体有颜色_跪求response.write输出字体颜色解决方法
  18. 如何排版 微信公众号「代码块」之 MarkEditor
  19. 这款录屏神器在 GitHub 火了,秒杀 33 种同类工具!
  20. gis可达性分析步骤_基于三维GIS技术的公路交通数字孪生系统

热门文章

  1. 乒乓球十一分制比赛规则_乒乓球比赛规则、技术及知识
  2. Zookeeper,集群管理之独孤求败
  3. 仿苹果手机_仿iphone12充电动画下载-仿iphone12充电动画软件下载 v1.1
  4. 国际自主智能机器人大赛参赛感悟
  5. 菩提千年,你是我红尘中最美的缘
  6. 2021总结:躺平的一年
  7. 如何创建水晶报表模板
  8. 二十三种设计模式之工厂模式(含Java工厂模式的实现)
  9. 图像处理:语义分割(sematic segmentation)
  10. 20145312 《信息安全系统设计基础》实验三 实时系统的移植