在 azure blob 中使用分页列出虚拟文件夹答案

【问题标题】：List virtual folders using pagination in azure blob在 azure blob 中使用分页列出虚拟文件夹
【发布时间】：2019-12-03 12:54:13
【问题描述】：

我想列出容器内的前 10 个文件夹或在 index = 5 和 count = 10 的范围内列出，然后我应该从第 5 个文件夹列出到第 15 个文件夹。

我尝试了标记，但仍然无法达到我想要的效果

    def listFolders(data):
    try:
        folder_list = []
        containerName = ImportSupporter.getContainerName(data)
        generator = block_blob_service.list_blobs(containerName, delimiter="/")
        count = len(generator.items)
        print(count)
        for blob in generator:
            item = {"SiteId": str(blob.name).split("/")[0]}
            folder_list.append(item)
        return folder_list

    except Exception as e:
        print(e)
        response_object = {"status": "fail", "message": "Unable to list Folders"}
        return response_object, 500

【问题讨论】：

标签： python list pagination azure-blob-storage

【解决方案1】：

这是我在容器中进行虚拟文件夹分页的示例代码。

from azure.storage.blob.baseblobservice import BaseBlobService
import itertools

account_name = '<your account name>'
account_key = '<your account key>'
container_name = '<your container name>'

blob_service = BaseBlobService(
    account_name=account_name,
    account_key=account_key
)

def pagination(index=0, count=10, prefix=None):
    blobs = blob_service.list_blobs(container_name, prefix=prefix, delimiter='/')
    blob_names = (blob.name for blob in blobs if blob.name.endswith('/'))
    return index, count, prefix, list(itertools.islice(blob_names, index, index+count))

为了测试上面的代码，我使用下面的代码在我的容器中创建了双重嵌套的虚拟文件夹。

service.create_container(container_name)

for i in range(100):
    for j in range(100):
        blob_name = "%03d/%03d/%03d" % (i,j,i*100+j)
        service.create_blob_from_text(container_name, blob_name, blob_name)

容器中虚拟文件夹的结构如下。

<root of container>
|- 000/
    |- 000/
    |- 001/
    .
    .
    .
    |- 099/
|- 001/
    |- 000/
    |- 001/
    .
    .
    .
    |- 099/
.
.
.
|- 099/
    |- 000/
    |- 001/
    .
    .
    .
    |- 099/

然后，我尝试运行下面的测试代码并得到结果。

print(pagination())
print(pagination(5, 10))
print(pagination(prefix='000/'))
print(pagination(5, 10, prefix='002/'))

# (0, 10, None, ['000/', '001/', '002/', '003/', '004/', '005/', '006/', '007/', '008/', '009/'])
# (5, 10, None, ['005/', '006/', '007/', '008/', '009/', '010/', '011/', '012/', '013/', '014/'])
# (0, 10, '000/', ['000/000/', '000/001/', '000/002/', '000/003/', '000/004/', '000/005/', '000/006/', '000/007/', '000/008/', '000/009/'])
# (5, 10, '002/', ['002/005/', '002/006/', '002/007/', '002/008/', '002/009/', '002/010/', '002/011/', '002/012/', '002/013/', '002/014/'])

【讨论】：