问题主要是使用multiprocessing在每一轮训练时并行随机产生数据时,job.get()数据超过了torch的暂存内存,参考了以下文章,加入代码或者降低了num_pool都没有解决我的问题
https://blog.csdn.net/u012796629/article/details/105936386/

最终我使用del data,在每轮训练结束时释放掉了该轮使用的数据就可以了

pytorch并行报错RuntimeError: unable to write to file</torch_xxx>相关推荐

  1. 运行pytorch作业出现错误 RuntimeError: unable to write to file

    运行pytorch作业出现错误 RuntimeError: unable to write to file </torch_xxx> https://github.com/huaweicl ...

  2. PyTorch——解决报错“RuntimeError: running_mean should contain *** elements not ***”

    1 问题描述 在使用PyTorch编程的时候,经常遇到一种报错就是:"RuntimeError: running_mean should contain *** elements not * ...

  3. 解决pytorch CrossEntropyLoss报错RuntimeError: 1D target tensor expected, multi-target not supported

    解决方法 CrossEntropyLoss(预测值,label)需要的输入维度是: 有batch时,预测值维度为2,size为[ batch_size, n ]时,label的维度是1,size为[ ...

  4. ubuntu安装lrzsz报错“E: Unable to locate package”

    ubuntu安装上传文件包lrzsz的时候报错 "E: Unable to locate package" 先运行下面两个 apt-get update apt-get upgra ...

  5. Intel Realsense D435运行报错 RuntimeError: Camera not connected! dev.hardware_reset()函数需加睡眠sleep()

    解决方案: 参考:Intel Realsense D435报错 RuntimeError: MFCreateDeviceSource(_device_attrs, &_source) retu ...

  6. Intel Realsense D435报错 RuntimeError: MFCreateDeviceSource(_device_attrs, _source) returned: HResult

    解决方案:hardware_reset()后是不是应该延迟一段时间?不延迟就会报错,加个sleep? 该错误会与RuntimeError: Camera not connected!交替出现,注释掉h ...

  7. selenium+python,解决selenium弹出新页面,无法定位元素的问题(报错:Unable to locate element:元素)

    selenium+python,解决selenium弹出新页面,无法定位元素的问题(报错:Unable to locate element:元素) 参考文章: (1)selenium+python,解 ...

  8. 解决移动端报错:Unable to preventDefault inside passive event listener due to target being treated as……

    解决移动端报错:Unable to preventDefault inside passive event listener due to target being treated as-- 报错如下 ...

  9. Windows下安装RabbitMQ报错:unable to perform an operation on node时的解决方案

    Windows下安装RabbitMQ报错:unable to perform an operation on node时的解决方案 参考文章: (1)Windows下安装RabbitMQ报错:unab ...

最新文章

  1. 教程 | OpenCV深度神经网络实现人体姿态评估
  2. HUMAnN2:人类微生物组统一代谢网络分析2
  3. Redis 操作数据
  4. 10个操作数的随机四则运算(二)
  5. Django默认用户认证系统和用户模型类
  6. 《BeagleBone开发指南》——1.3 BeagleBone硬件
  7. java单例模式_在Java中实现单例模式
  8. leetcode(189) 旋转数组
  9. Qt工作笔记-对qmake的认识【两篇转载结合】
  10. Python+tkinter生成自动跳转到网页的二维码
  11. Linux文件目录操作
  12. 带通滤波器电路图大全(三款带通滤波器电路设计原理图详解)
  13. [电机控制话题] 精辟!伺服电机、舵机、步进电机的区别
  14. 计算机硕士专业有哪些课程,计算机专业考研科目有哪些
  15. 两个技巧教你怎么裁剪视频尺寸,手残党也能掌握
  16. 魔兽世界燃烧的远征最新服务器,进驻推荐服务器,享受《燃烧的远征》
  17. Hibernate VS iBATIS (转自ITEYE davy)
  18. 8.8.6. Polygons
  19. 飞机打扭来扭去的靶子
  20. html语言对ui设计,学ui设计还需要学html5代码?

热门文章

  1. 要掌握的异步connect 用法
  2. js实现string.format函数
  3. 《淘宝网开店 进货 运营 管理 客服 实战200招》——2.5 网上开店货源大揭密...
  4. html 传参阻止冒泡,angular阻止冒泡事件
  5. HDCP Repeater工作模式流程总结 ——第一阶段
  6. Linux SIGPIPE信号产生原因与解决方法
  7. qeePHP学习 qeePHP模型的CURD
  8. 算法 — 十进制转十六进制
  9. android 广播解绑,Android四大组件之BroadCast
  10. python meshgrid_numpy的生成网格矩阵 meshgrid()