python读取大文件的坑_如何在Python中读取大文件的特定部分

Given a large file (hundreds of MB) how would I use Python to quickly read the content between a specific start and end index within the file?

Essentially, I'm looking for a more efficient way of doing:

open(filename).read()[start_index:end_index]

解决方案

You can seek into the file the file and then read a certain amount from there. Seek allows you to get to a specific offset within a file, and then you can limit your read to only the number of bytes in that range.

with open(filename) as fin:

fin.seek(start_index)

data = fin.read(end_index - start_index)

That will only read that data that you're looking for.

python读取大文件的坑_如何在Python中读取大文件的特定部分相关推荐

linux中文件重命名_如何在Linux中重命名文件？
linux中文件重命名 This tutorial will walk you through the simple steps to rename a file in Linux. 本教程将引导您完 ...
matlab分析xml文件_如何在Java中读取XML文件（DOM分析器）
matlab分析xml文件 Today we will learn how to read the XML file in Java. We will also learn how to parse ...
git 还原文件到其他版本_如何在Git中还原旧文件版本
git 还原文件到其他版本读: 第1部分:什么是Git? 第2部分:Git入门第3部分:创建第一个Git存储库第4部分:如何在Git中还原旧文件版本第5部分:3个用于Git的图形工具第6部分 ...
java怎么引入html文件路径_如何在public_html中读取文件但在域外？使用相对路径...
我正在尝试从我的(附加组件)域目录之外的目录中读取文件 . 这是我的目录结构: public_html / domain / file_read.php file_write.php sensitiv ...
linux中python如何调用matlab的数据_?如何在Python中加入多个数据帧？
全文共2235字,预计学习时长7分钟来源:Pexels 初学Python编程的人,面临的是各种未知的挑战. 下面是一个几乎让所有更有抱负的数据科学家都感到意外的场景: 你正在处理一个从多个源收集数据 ...
python set 排序_python set 排序_如何在Python中使用sorted()和sort()
点击"蓝字"关注我们 ?"Python基础知识" 大卫·丰达科夫斯基著 18财税3班李潇潇译日期:2019年5月6日一. 使用sorted() ...
outlook附件大小限制_如何在Outlook中调整大图片附件的大小
outlook附件大小限制 When you have to send someone a large image file through email, it's a good idea to re ...
macos 虚拟镜像文件_如何在macOS中使用虚拟文件测试网络或硬盘速度
macos 虚拟镜像文件 File transfer speeds can vary greatly from device to device. The same holds true for ne ...
python一行输出多个数据_如何在Python中让两个print()函数的输出打印在一行内?
1.两个连续的print()函数为什么在输出时内容会分行显示? 解:print()中有两个默认参数sep和end,其中sep是代替分隔符,end是代替末尾的换行符,默认使用','代替空格,且默认末尾加 ...

python读取大文件的坑_如何在Python中读取大文件的特定部分

python读取大文件的坑_如何在Python中读取大文件的特定部分相关推荐

最新文章

热门文章