如何遍历一个主文件夹的所有文件夹中的所有文件？ [复制]

Question

所以我写了一个 Python 脚本，可以对某个 .txt 文件做某事：

with open("1.txt") as f:
    for line in f:
        #DoStuff

现在这适用于 1 个.txt 文件。 我有一个主文件夹，在主文件夹中我有不同的其他文件夹，并且在每个文件夹中我还有几个.txt 文件。

如何遍历所有这些以将我的脚本应用于主文件中每个文件夹中的每个 .txt 文件？

Answer 1

您可以使用 python 中的 glob 模块

from glob import glob

file_list = glob("(folder path)/*/*")

这将为您提供子文件夹中所有文件路径的列表。

然后您可以迭代并执行您的操作。

Answer 2

您可以为此使用 glob.iglob() 和 os.walk()。 这里有一个小功能。

def list_of_files(path, extension, recursive=False):
    '''
    Return a list of filepaths for each file into path with the target extension.
    If recursive, it will loop over subfolders as well.
    '''
    if not recursive:
        for file_path in glob.iglob(path + '/*.' + extension):
            yield file_path
    else:
        for root, dirs, files in os.walk(path):
            for file_path in glob.iglob(root + '/*.' + extension):
                yield file_path

你需要import glob, os才能使用它。

在你的情况下：

for file in list_of_files(path='master_folder_path_here', extension='txt'):
    ...

Answer 3

你可以使用 os.walk()

import os

path = 'c:\\projects\\hc2\\'

files = []
# r=root, d=directories, f = files
for r, d, f in os.walk(path):
    for file in f:
        if '.txt' in file:
            files.append(os.path.join(r, file))

for f in files:
    print(f)

输出：

c:\projects\hc2\app\readme.txt
c:\projects\hc2\app\release.txt
c:\projects\hc2\web\readme.txt
c:\projects\hc2\whois\download\afrinic.txt
c:\projects\hc2\whois\download\apnic.txt
c:\projects\hc2\whois\download\arin.txt
c:\projects\hc2\whois\download\lacnic.txt
c:\projects\hc2\whois\download\ripe.txt
c:\projects\hc2\whois\out\test\resources\asn\afrinic\3068.txt
c:\projects\hc2\whois\out\test\resources\asn\afrinic\37018.txt