今天上午刚到公司,就有同事在公司群里反映某个计划任务出现问题了。我就怀着刨根问底的心,去查看了log。发现挺有意思的一个问题,PHP内存溢出导致脚本执行失败。那就一起来看个究竟吧!

  1. 首先查看了计划任务的Log

    log_error.png

从报错信息字面意思可以看出,允许的134217728 bytes的内存已经用尽,还要试图分配12961640 bytes内存。
给你(当前脚本)分配的内存你已经用完了,你还想问系统要内存。系统这时想对你说:

地主家也没有余粮啊(借用葛优大爷的一句话)

geyou.png
  1. 模拟一下"案发现场"

    • 新建一个mem_exhausted.php文件 copy过来一个2.4M的log文件做测试用

      log_size.png
    • 写个简单的脚本重现"案发现场" 故意分配1M的内存 来读取2.4M的log
      test_mem_1.png
    • 执行脚本,"案发现场"重现
      test_run_res.png
  1. 分析"事故"原因
    脚本一次性读取了大量的数据(可能是读的文件,可能是读取的数据库)
    如下图: 往杯子(分配给当前脚本的内存)里面倒数水(log文件的数据),杯子容量(内存)不够用

    water_overflow.jpg
  2. 解决方案
    a. 既然杯子小 就换个大杯子(增大给脚本分配的内存)治标不治本: ini_set('memory_limit','100M');

    new_1.png

    b. 把水分批次倒入杯子中(循环,分段读取数据,读数据库的话可以用limit)

code_1.png

看看结果

run_res_new.png

分段读取也是可以解决问题滴

  1. 其他优化方案

    • 应当尽可能减少静态变量的使用,在需要数据重用时,可以考虑使用引用(&)。
    • 数据库操作完成后,要马上关闭连接;
    • 一个对象使用完,要及时调用析构函数(__destruct())
    • 用过的变量及时销毁(unset())掉
    • 可以使用memory_get_usage()函数,获取当前占用内存 根据当前使用的内存来调整程序
    • unset()函数只能在变量值占用内存空间超过256字节时才会释放内存空间。(PHP内核的gc垃圾回收机制决定)
    • 有当指向该变量的所有变量(如引用变量)都被销毁后,才会释放内存
      (PHP变量底层实现是一个_zval_struct结构体,is_refgc表示引用计数 is_refgc表示是否为引用)

谁动了我的内存之PHP内存溢出相关推荐

  1. 深入理解Java虚拟机——第二章——Java内存区域与内存溢出异常

    运行时数据区域 Java虚拟机运行时数据区域 程序计数器 程序计数器可以看做是当前线程所执行的字节码的行号指示器.字节码解释器工作时就是通过改变这个计数器的值来选取下一条所需要执行的字节码指令,分支. ...

  2. python会不会出现内存泄露_Python内存泄漏和内存溢出的解决方案

    一.内存泄漏 像Java程序一样,虽然Python本身也有垃圾回收的功能,但是同样也会产生内存泄漏的问题. 对于一个用 python 实现的,长期运行的后台服务进程来说,如果内存持续增长,那么很可能是 ...

  3. 内存泄漏和内存溢出的关系和区别

    作者:不怕天黑_0819 链接:https://www.jianshu.com/p/61d34df7eabe 一.内存泄漏(memory leak) 1.内存泄漏是指程序中已动态分配的堆内存由于某种原 ...

  4. 图解Java内存区域及内存溢出异常

    图解 Java 内存区域及内存溢出异常 在阅读 <深入理解Java虚拟机:JVM高级特性与最佳实践(第2版) >后,为了加深对 Java 内存区域的印象及理解,特意做成了思维导图. 名词解 ...

  5. JVM-02内存区域与内存溢出异常(中)【hotspot虚拟机对象】

    文章目录 思维导图 对象的创建 对象的内存布局 实例数据(Instance Data) 对齐填充(Padding) 对象的访问定位 使用句柄(类似间接指针) 直接指针访问 (HotSpot采用这种方式 ...

  6. JVM-01Java内存区域与内存溢出异常(上)【运行时区域数据】

    思维导图 概述 运行时数据区域 程序计数器 (Program Counter Register) 概念 特征 可能抛出的异常 知识扩展:JIT即时编译 Java虚拟机栈 (Java Virtual M ...

  7. java 内存溢出的分类_【深入理解Java虚拟机】读后感:JVM内存划分与内存溢出小结...

    扫码关注公众号:Java 技术驿站 发送:vip 将链接复制到本浏览器,永久解锁本站全部文章 [公众号:Java 技术驿站] [加作者微信交流技术,拉技术群] # JVM内存划分与内存溢出小结 # 1 ...

  8. 0x00000000指令引用的内存不能为written_「深入Java虚拟机」Java内存区域与内存溢出...

    内存区域 Java虚拟机在执行Java程序的过程中会把他所管理的内存划分为若干个不同的数据区域.Java虚拟机规范将JVM所管理的内存分为以下几个运行时数据区:程序计数器.Java虚拟机栈.本地方法栈 ...

  9. 什么是堆,栈,内存泄漏和内存溢出?

    heap:是由malloc之类函数分配的空间所在地.地址是由低向高增长的. stack:是自动分配变量,以及函数调用的时候所使用的一些空间.地址是由高向低减少的. 一.预备知识-程序的内存分配 一个由 ...

  10. Java内存泄露和内存溢出、JVM命令行工具、.JDK可视化工具、Java Class文件

    1.Java内存泄露和内存溢出对比 1.1 Java 内存泄露 内存泄露是指一个不再被程序使用的对象或变量还在内存中占用空间. 1.1.1判断内存空间是否符合垃圾回收的标准 在Java语言中,判断一个 ...

最新文章

  1. 基于python的数据分析方法五种_利用Python进行数据分析 第5章 pandas入门(1)
  2. java伪装成mysql从节点_开发时java项目启动时需要连mysql等,有没有什么工具可以mock连接使得启动顺利不报错?...
  3. badboy 不支持html5,html5_iframe.htm
  4. 如何在时间紧迫情况下进行机器学习:构建标记的新闻 数据 库 开发 标记 网站 阅读1629 原文:How we built Tagger News: machine learning on a
  5. 射影几何3:拓广平面
  6. 如何在Power 750上实现硬盘背板的分离
  7. 移动隐藏邮箱并删除默认邮箱数据库
  8. Ubuntu时间显示不准确的解决方案
  9. 大萧条时期什么行业走俏_大流行时期的用户体验
  10. 世上描述宇宙最精确的科学理论
  11. 6年级下册计算机教案,六年级下册信息技术教案 (6).doc
  12. 嵌入式操作系统内核原理和开发(中断)
  13. 5000册售罄!怎能不为你骄傲?「博客出书的故事⑤」
  14. 实用供暖通风空调设计手册 第三版_从设计到施工,设计师必知的工艺材料知识都在这里!...
  15. [学科总结] 《线性系统理论》
  16. 净资产收益率与市盈率的关系
  17. 使用阿里云的ip地址查询服务-使用java调用ip地址查询服务
  18. ggplot画 ump 和tsne 从seurat中使用addmodule得到的umap 使用ggplot画图
  19. Excel基础教程(1)
  20. Cisco Visio Stencil 实体图标下载

热门文章

  1. C 类INI文本,可以添加注释(初步实现,可以添加更加复杂的通用化设计)
  2. python多线程代码_Python多线程代码求改错
  3. c语言eof_C语言 技能提升 系列文章(十)错误处理
  4. linux内核syscall_define6,Syscall系统调用Linux内核跟踪
  5. java数据结构 队列_Java数据结构与算法[原创]——队列
  6. FPGA之道(40)HDL的语法结构
  7. RS-232 Receiver
  8. Apache、php、mysql默认安装路径
  9. input[type=checkbox] ; input[type=radio] 改变默认样式
  10. MyBatis查询两个字段,返回Map,一个字段作为key,一个字段作为value的实现