python如何读取大文件

来源:千锋教育
发布时间:2023-11-08 01:47:22
分享

可以通过两种方法利用python读取大文件:第一种是利用yield生成器读取;第二种是:利用open()自带方法生成迭代对象,这个是一行一行的读取。

1、利用yield生成器读取

defreadPart(filePath,size=1024,encoding="utf-8"):

withopen(filePath,"r",encoding=encoding)asf:

whileTrue:

part=f.read(size)

ifpart:

yieldpart

else:

returnNone

filePath=r"filePath"

size=2048#每次读取指定大小的内容到内存

encoding='utf-8'

forpartinreadPart(filePath,size,encoding):

print(part)

#Processingdata

2、利用open()自带方法生成迭代对象,这个是一行一行的读取

withopen(filePath)asf:

forlineinf:

print(line)

#Processingdata

以上内容为大家介绍了python如何读取大文件,希望对大家有所帮助,如果想要了解更多Python相关知识,请关注IT培训机构:千锋教育。

声明:本站部分稿件版权来源于网络,如有侵犯版权,请及时联系我们。

相关推荐

  • Python 命名空间 Python使用叫做命名空间的东西来记录变量的轨迹。命名空间是一个字典(dictionary),它的键就是变量名,它的值就是那些变量的值。Anamespaceisamappingfromnamesto
  • Python 命名空间的生命周期 不同的命名空间在不同的时刻创建,有不同的生存期。1、内置命名空间在Python解释器启动时创建,会一直保留,不被删除。2、模块的全局命名空间在模块定义被读入时创建,通常模块命名空间也会一直保存到解释器
  • Python 命名空间的访问 1、局部命名空间可以locals()BIF来访问。locals返回一个名字/值对的dictionary。这个dictionary的键是字符串形式的变量名字,dictionary的值是变量的实际值。示例
  • python 编译器 执行pythondemo.py后,将会启动Python的解释器,然后将demo.py编译成一个字节码对象PyCodeObject。有的人可能会很好奇,编译的结果不应是pyc文件吗,就像Java的cla
  • python可以制作外挂么? python可以制作游戏外挂,下面就列举一些必备工具吧!需要安装autopy和PIL以及pywin32包。autopy是一个自动化操作的python库,可以模拟一些鼠标、键盘事件,还能对屏幕进行访问,
  • python架构是什么? python中的架构就是框架,这些框架可以让web应用的开发更轻松。这些框架把不同的模块集成在一起,让你更快的开发程序而不用注意一些细节。Python中几种框架的介绍:Django:PythonWeb