时间戳

首页 > 技术文章 > python 文件读取

python 文件读取

leishenwudi 2020-09-13 16:26 原文

python文件读取有两种读取方式，一种是文本模式，一种是二进制方式，在不打印内容的情况下，尽量用二进制读取方式，因为二进制读取更快

写文件用a模式可以实现文件追加

 随机读取数据

随机读取数据就需要用到seek函数，该函数能够指定读取的位置，只要给文件中的每一对内容指定固定的长度，就能通过seek函数进行随机数据读取

例如，统计每个人的姓名和年龄，姓名用10个字符表示，年龄用4个，则文件的读取就可以用以下代码实现

首先写入数据

names = ['Maria', 'Lilei', 'Kangkang']
ages = [20,30,50]
if __name__ == '__main__':
    with open('test.txt', 'w') as file:
        for i in range(len(names)):
            file.write("{name:<10}{age:>4}\n".format(name = names[i], age = ages[i]))

 

 然后再随机访问数据

with open('test.txt','r') as file:
    file.seek(16)
    print("[第三行数据]当前位置:%s，姓名:%s，年龄：%d" % (file.tell(),file.read(10),int(file.read(4))))
    file.seek(0)
    print("[第三行数据]当前位置:%s，姓名:%s，年龄：%d" % (file.tell(),file.read(10),int(file.read(4))))
    file.seek(32)
    print("[第三行数据]当前位置:%s，姓名:%s，年龄：%d" % (file.tell(),file.read(10),int(file.read(4))))

 

 这里需要注意一个换行符要占seek的两个文职

利用yield结合seek分批读取数据并统计所有人员的平均年龄

yield主要用于制作生成器，与传统的生成器相比，yield的生成器可以动态的生成需要的数据，节省资源，前提都需要数据长度一定

NAME_LENGTH = 10
READ_LENGTH = 4
line_count = 0
def get_age():
    seek_offset = 0
    with open('test.txt', 'r') as file:
        while True:
            file.seek(seek_offset + NAME_LENGTH)
            data = file.read(READ_LENGTH)
            if data:
                global line_count
                line_count = line_count + 1
                seek_offset = file.tell() + 2
                yield data
            else:
                return
if __name__ == '__main__':
    sum = 0
    for i in get_age():
        sum = sum + int(i)
    avg = sum / line_count
    print('一共%d条记录，平均年龄:%3.2f' % (line_count, avg))

 

 文件缓冲

在用open函数进行文件写入时，都会调用CPU来进行，当写入的数据量很小的时候，就会导致IO性能的严重浪费，此时就需要一个缓冲区，使输入的数据达到一定条件之后才调用CPU进行写入操作

缓冲可分为三类

  1. 全缓冲（buffing > 1）：当缓存被填满后才会进行真正的IO操作
  2. 行缓冲（buffing = 1）：当遇到换行符时才执行IO操作
  3. 无缓冲

这个实际能看的操作就在交互页面实行，当buffing>=1时，实行write函数时，并没有写进去，而当程序结束时才真正写进去了

推荐阅读