Hint: If you want to see a list of allocated tensors when OOM happens 的解决办法

Hint: If you want to see a list of allocated tensors when OOM happens, add report_tensor_allocations_upon_oom to RunOptions for current allocation info.

昨天复现了论文的代码，然后今天想多训练一点数据，将batch_size从144调整为500，结果就出现这个错误：Hint: If you want to see a list of allocated tensors when OOM happens, add report_tensor_allocations_upon_oom to RunOptions for current allocation info.

原因就是GPU的使用率太高了（数据量调太大了），可能接近或者超过100%，爆显存了。
所以把batch_size调小一些就没问题了。

Hint: If you want to see a list of allocated tensors when OOM happens 的解决办法相关推荐

Hint: If you want to see a list of allocated tensors when OOM happens,
问题描述: 使用keras搭建siamese网络时,遇到错误如下: OOM when allocating tensor with shape[129024,4096] and type float ...
解决‘Hint: If you want to see a list of allocated tensors when OOM happens, add ................‘
tensorflow-gpu运行ner模型的训练代码,出现报错如下图: 主要原因是显卡的显存不够. 解决方法: 1,降低训练的数据输入批次值大小:batch_size 2, 将模型放到gpu显存大的服 ...
微信公众号开发，报错{errcode:41005,errmsg:media data missing hint:}的解决办法---亲测有效
在微信开发中,遇到报错:errcode":41005,"errmsg":"media data missing hint 具体解决办法如下地址,实测有效: 对应 ...
微信小程序第三方平台提交时，出现errcode: 85085，errmsg: submit audit reach limit, please try later hint的解决办法
向大家介绍一下出现"85085"错误码的原因.微信状态码的解释为:"小程序提审数量已达本月上限".可通过接口来查询当月的提交次数,具体链接为:https://d ...
报错解决：ResourceExhaustedError: OOM when allocating tensor with shape
报错解决:ResourceExhaustedError: OOM when allocating tensor with shape 早上在使用tensorflow时遇到如下报错: Traceback ...
使用tensorflow object detection API 训练自己的目标检测模型（三）
在上一篇博客"使用tensorflow object detection API 训练自己的目标检测模型 (二)"中介绍了如何使用LabelImg标记数据集,生成.xml文件,经过 ...
FakeAPP训练时错误【ResourceExhaustedError: OOM】解决方法
背景在使用FakeApp训练的时候出错,表现为点击"train"按钮后一段时间就报错,且没有训练预览窗口弹出. log文件里显示 undefinedUsing GPU0 for ...
TensorFlow精进之路（十六）：使用slim模型库对图片分类
1.概述 TF-slim是tensorflow的一个轻量级库,它将很多常见tensorflow函数进行封装,使的模型的构建.训练.测试都更加简洁,特别适用于构建结构复杂的深度神经网络.github地址 ...
tensorflow-gpu版本使用问题和方法汇总
tensorflow-gpu版本使用问题和方法汇总训练内存溢出问题问题描述解决方法 keras和tensorflow混合使用的条件下发生内存溢出的问题 batch_size设置导致tensorf ...
辅助神器——Kaggle
辅助神器--Kaggle 在学tensorflow的时候,发现训练模型会出现这个错误: tensorflow.python.framework.errors_impl.ResourceExhauste ...

Hint: If you want to see a list of allocated tensors when OOM happens 的解决办法

Hint: If you want to see a list of allocated tensors when OOM happens, add report_tensor_allocations_upon_oom to RunOptions for current allocation info.

Hint: If you want to see a list of allocated tensors when OOM happens 的解决办法相关推荐

最新文章

热门文章