首页 > 解决方案 > python glob 或 listdir 创建然后将文件从一个目录保存到另一个

问题描述

我正在将文档从 pdf 转换为文本。pdfs 当前位于一个文件夹中,然后在 txt 转换后保存到另一个文件夹中。我有很多这样的文档,并且更喜欢迭代子文件夹并保存到 txt 文件夹中具有相同名称的子文件夹,但在添加该层时遇到问题。

我知道我可以使用 glob 递归迭代并为文件列表等执行此操作。但不清楚如何将文件从该文件夹保存到新文件夹。这不是完全必要的,但会更加方便和高效。

有没有好的方法来做到这一点?

import os
import io
from pdfminer.pdfinterp import PDFResourceManager, PDFPageInterpreter
from pdfminer.converter import TextConverter
from pdfminer.layout import LAParams
from pdfminer.pdfpage import PDFPage


def convert(fname, pages=None):
    if not pages:
        pagenums = set()
    else:
        pagenums = set(pages)

    output = io.StringIO()
    manager = PDFResourceManager()
    converter = TextConverter(manager, output, laparams=LAParams())
    interpreter = PDFPageInterpreter(manager, converter)

    infile = open(fname, 'rb')
    for page in PDFPage.get_pages(infile, pagenums):
        interpreter.process_page(page)
    infile.close()
    converter.close()
    text = output.getvalue()
    output.close
    return text 
    print(text)



def convertMultiple(pdfDir, txtDir):
    if pdfDir == "": pdfDir = os.getcwd() + "\\" #if no pdfDir passed in 
    for pdf in os.listdir(pdfDir): #iterate through pdfs in pdf directory
        fileExtension = pdf.split(".")[-1]
        if fileExtension == "pdf":
            pdfFilename = pdfDir + pdf 
            text = convert(pdfFilename)  
            textFilename = txtDir + pdf.split(".")[0] + ".txt"
            textFile = open(textFilename, "w")  
            textFile.write(text)  


pdfDir = r"C:/Users/Documents/pdf/"
txtDir = r"C:/Users/Documents/txt/"
convertMultiple(pdfDir, txtDir)   

标签: pythondirectorygloblistdir

解决方案


正如你所建议的,glob在这里工作得很好。它甚至可以只过滤.pdf文件。

测试后取消注释这 3 行。

import os, glob

def convert_multiple(pdf_dir, txt_dir):
    if pdf_dir == "": pdf_dir = os.getcwd() # If no pdf_dir passed in 
    for filepath in glob.iglob(f"{pdf_dir}/**/*.pdf", recursive=True):
        text = convert(filepath)
        root, _ = os.path.splitext(filepath) # Remove extension
        txt_filepath = os.path.join(txt_dir, os.path.relpath(root, pdf_dir)) + ".txt"
        txt_filepath = os.path.normpath(txt_filepath) # Not really necessary
        print(txt_filepath)
#        os.makedirs(os.path.dirname(txt_filepath), exist_ok=True)
#        with open(txt_filepath, "wt") as f:
#            f.write(text)


pdf_dir = r"C:/Users/Documents/pdf/"
txt_dir = r"C:/Users/Documents/txt/"
convert_multiple(pdf_dir, txt_dir)   

要确定新.txt文件的文件路径,请使用os.path模块中的函数。

os.path.relpath(filepath, pdf_dir)返回文件的文件路径,包括相对于pdf_dir.

假设filepath是:

C:/Users/Documents/pdf/Setec Astronomy/employees.pdf

并且pdf_dir

C:/Users/Documents/pdf/

它会返回Setec Astronomy/employees.pdf,然后可以os.path.join()与 一起传递txt_dir给我们,为我们提供包含额外子目录的完整文件路径。

你可以这样做txt_filepath = filepath.replace(filepath, pdf_dir),但你必须确保所有相应的斜线都在同一个方向上,并且没有多余的/缺少的前导/尾随斜杠。

在打开新.txt文件之前,需要创建所有子目录。os.path.dirname()调用以获取文件目录的文件路径,并将os.makedirs()exist_ok参数设置为,以在目录已存在时True抑制异常。FileExistsError

打开文件时使用with语句.txt以避免显式调用.close(),尤其是在任何异常的情况下。


推荐阅读