python3大数据文件的读取方法

这篇文章主要介绍python3大数据文件的读取方法,文中示例代码介绍的非常详细,具有一定的参考价值,感兴趣的小伙伴们一定要看完!

创新互联是专业的武安网站建设公司,武安接单;提供网站设计制作、成都网站制作,网页设计,网站设计,建网站,PHP网站建设等专业做网站服务;采用PHP框架,可快速的进行武安网站开发网页制作和功能扩展;专业做搜索引擎喜爱的网站,专业的做网站团队,希望更多企业前来合作!

python中读取大文件的方法:

1、利用yield生成器读取

def readPart(filePath, size=1024, encoding="utf-8"):
    with open(filePath,"r",encoding=encoding) as f:
        while True:
            part = f.read(size)  
            if part:
                yield part
            else:
                return None
filePath = r"filePath"
size = 2048 # 每次读取指定大小的内容到内存
encoding = 'utf-8'
for part in readPart(filePath,size,encoding):
    print(part)
    # Processing data

2、利用open()自带方法生成迭代对象,这个是一行一行的读取

with open(filePath) as f:
    for line in f:
        print(line)
        # Processing data

以上是python3大数据文件的读取方法的所有内容,感谢各位的阅读!希望分享的内容对大家有帮助,更多相关知识,欢迎关注创新互联行业资讯频道!


网页题目:python3大数据文件的读取方法
文章起源:http://bzwzjz.com/article/pceggh.html

其他资讯

Copyright © 2007-2020 广东宝晨空调科技有限公司 All Rights Reserved 粤ICP备2022107769号
友情链接: 成都网站设计 网站建设费用 成都品牌网站建设 成都网站建设公司 成都网站设计 品牌网站建设 品牌网站建设 成都h5网站建设 高端定制网站设计 梓潼网站设计 营销型网站建设 手机网站制作设计 定制网站建设 手机网站制作 成都网站建设 高端品牌网站建设 响应式网站设计 温江网站设计 外贸网站建设 H5网站制作 成都商城网站制作 成都网站建设公司