python列表的存储结构_在python列表类型结构中合理地存储10亿个以上的值

我在写一个程序，为数字高程模型的一个固定区域创建变量函数图，这个区域已经被转换成一个数组。我计算窗口约束内点对之间的方差（高程差）和滞后（距离）。每个数组位置与其他数组位置进行比较。对于每个对，滞后值和方差值附加到单独的列表中。一旦对所有的对进行了比较，这些列表将用于数据分块、平均和最终绘图。在

对于较小的窗口大小（比如60x60px），该程序运行良好。对于高达120x120px左右的窗口，这将提供2个2073600个条目的列表，我可以慢慢地让程序运行。对于这个区域，有超过60000个条目的记录

在程序开始时，我创建一个空列表：variance = []

lag = []

然后在for循环中计算滞后和方差，将值附加到不同的列表中：

^{pr2}$

我浏览了stackoverflow页面，看到了一个类似的问题here。这个解决方案可能会提高时态程序的性能，但是提供的解决方案最多只能使用1亿个条目，因此不能帮助我处理更大的区域（如240x240px示例）。我也考虑过使用numpy数组来存储这些值，但我不认为这样可以避免内存问题。在

如果有任何建议，我将非常感谢您使用我为较大窗口尺寸定义的某种比例列表。在

我是python新手，所以请原谅我的无知。在

代码的主要部分可以看到here

python列表的存储结构_在python列表类型结构中合理地存储10亿个以上的值相关推荐

python字典的存储结构_解决python字典结构内存暴涨问题
背景:当读取一个key value数据的时候,python的字典结构会造成内存使用扩10倍左右,无可容忍.此文解决这个问题数据:word2vec训练的结果,word对应400维的词向量.词表共1.6 ...
python中基本程序结构_关于Python 程序格式框架的描述,正确的是( )
[判断题]元组的元素是可读的,可以对元组进行更新.增加.删除操作. [多选题]哪些选项关于循环结构的描述是正确的( ) [单选题]以下可以终结一个循环的是 . [判断题]对于大量列表的连接,exten ...
python中的栈结构_对Python列表进行封装和二次开发实现自定义栈结构
设计自定义栈类,模拟入栈.出栈.判断栈是否为空.是否已满以及改变栈大小等操作. class Stack: #构造方法 def __init__(self, maxlen = 10): self._co ...
python保留字的分支结构_下列Python保留字中,不用于表示分支结构的是
[单选题]下列Python保留字中,不用于表示分支结构的是 [单选题]以下程序的输出结果是: j = '' for i in "12345": j += i + ',' print ...
python中表示分支结构_下面Python关键字中，不用于表示分支结构的是()。
I was nervous-desperately nervous-about becoming car-free. But eight months ago our car was hit, and ...
以下选项中python用于异常处理结构_《Python 程序设计》复习题
目录填空题一.基础知识二.序列三.选择结构与循环结构和函数及面向对象.文件选择题一.Python 基础语法二.基本数据类型三.程序的控制结构四.函数和代码复用五.组合数据类型六. ...
python中以下关于列表描述错误的_在Python中,以下关于函数的描述错误的是哪一项?...
[判断题]Python内置函数len____可以返回列表.元组.字典.集合.字符串以及range对象中元素个数. [判断题]Python内置函数max____用来返回序列中的最大元素. [判断题]Py ...
python中存储坐标_最好使用元组或numpy数组来存储坐标
在内存消耗方面,numpy数组比Python元组更紧凑. numpy数组使用一个连续的内存块.numpy数组的所有元素必须是声明的类型(例如32位或64位float).Python tuple不一定使 ...
初中python编程初步教学设计_初中Python程序设计顺序结构教学设计方案.docx
教学设计方案一<顺序结构程序设计> 一.教学目标 (1)知识与技能能够根据问题分析,设计顺序结构程序的算法能够运用顺序结构,使用 Python程序编写.调试并运行代码 (2)过程与方法 ...

python列表的存储结构_在python列表类型结构中合理地存储10亿个以上的值

python列表的存储结构_在python列表类型结构中合理地存储10亿个以上的值相关推荐

最新文章

热门文章