spacy存在内存泄露问题

spacy程序会随着处理文本数据的增大，内存占用增大，不释放，直到程序运行结束。

2.1.9 之前的版本都存在内存泄露的问题。

spacy 2.1.9 说是解决了内存泄露的问题，但其实没有解决。

spacy 2.2.5 说是解决了内存泄露的问题，但是没有完全解决，在使用nlp.pipe()处理，依然有问题。使用nlp(text)不存在内存泄露问题

例子：

在这里插入代码片

spacy存在内存泄露问题相关推荐

Android中出现内存泄露的原因
短生命周期的对象持有了长生命周期的对象,使得短生命周期对象驻留内存,消耗内存,因为无法让垃圾回收器GC验证这些对象是否不再被使用,无法释放这些内存. 以下会造成内存泄露: a.数据库的cursor没有 ...
Linux下正确使用getifaddrs()函数避免内存泄露
工作中使用valgrind检测内存泄露时,发现getifaddrs()很容易导致内存泄露,下面是正确的代码: //get local ip of network card //gcc -g get_a ...
使用valgrind检测ATS插件中的内存泄露
一.内存错误出现的场景这几天在重构ATS插件代码的过程中遇到了烦人的内存泄露问题, 周五周六连续两天通过走查代码的方法,未能看出明显的导致内存错误的代码, 同时也觉得C和C++混合编程得到一个动态库 ...
在Ubuntu 14.04 64bit上安装Valgrind并检查内存泄露
valgrind官网:http://valgrind.org/ 1.安装方法第一种方式:下载目前最新的源码,编译安装,在服务器上推荐这种方式 wget http://valgrind.org/dow ...
ATS插件开发中内存泄露问题的解决方法探讨
接触ATS开发已经有几年了,开发过内核的模块,也从事过插件的开发.内存泄露问题一直是一个困扰大多数ATS开发者的头疼的问题,下面说说我自己的感受和思考.这里这关注ATS插件开发这个话题.源码的exam ...
通过define _CRTDBG_MAP_ALLOC宏来检测windows上的code是否有内存泄露
VS中自带了内存泄露检测工具,若要启用内存泄露检测,则在程序中包括以下语句: #define _CRTDBG_MAP_ALLOC #include <crtdbg.h> 它们的先后顺序不能 ...
Ubuntu下内存泄露检测工具Valgrind的使用
在VS中可以用VLD检测是否有内存泄露,可以参考http://blog.csdn.net/fengbingchun/article/details/44195959,下面介绍下Ubuntu中内存泄露检 ...
OpenCV中的内存泄露问题（cvLoadImage，cvCloneImage）
转自:http://apps.hi.baidu.com/share/detail/30893646 在做项目的过程中,使用OpenCV经常会出现一些内存泄露问题,自己编写的程序出现问题还情有可原,但若 ...
python会不会出现内存泄露_Python内存泄漏和内存溢出的解决方案
一.内存泄漏像Java程序一样,虽然Python本身也有垃圾回收的功能,但是同样也会产生内存泄漏的问题. 对于一个用 python 实现的,长期运行的后台服务进程来说,如果内存持续增长,那么很可能是 ...

spacy存在内存泄露问题

spacy存在内存泄露问题相关推荐

最新文章

热门文章