需要帮助优化 gspread API 调用

Question

我一直在玩弄 gspread 来将数据推送到 Google 表格，并在 python 中想出了一个工作脚本。

此脚本必须完成的“工作”的快速背景：

• 打开 Google 表格
• 从 B 列读取 Instagram 用户名
• 从 Instagram 收集数据
• 填写F列数据

现在，如前所述，我可以使用下面的代码。但这确实（至少在我的理解中）它更新的每行使用 1 个 API 调用，但我的工作表将有 1000 多行带有用户名的行，所以这最终可能会使用大量的 API 调用。所以我宁愿批量做这个。所以暂时存储它并在 1 次大推送中更新所有行。从 Gspread 文档中，我注意到如果我可以分配精确的单元格和列值，应该是可能的，但我不知道如何构建我的原始输入数据来促进这一点。

我的最终用户偶尔也会输入空行（天知道为什么..），但我注意到我当前的逻辑在这里填充数据，实际上需要转到空行下方的行。

所以我很想听听您对如何优化它的意见，并用我当前的脚本解决 2 个“问题”：

• 减少 API 调用次数
• 正确处理空行

这是我的代码：

#import Google 
import gspread
from oauth2client.service_account import ServiceAccountCredentials

#Setting up connection to Google Sheet and picking up the initial values
scope = ['https://spreadsheets.google.com/feeds', 'https://www.googleapis.com/auth/drive']
creds = ServiceAccountCredentials.from_json_keyfile_name('file_init.json',scope)
client = gspread.authorize(creds)
sheet = client.open('Workbookname').sheet1
pp = pprint.PrettyPrinter()

ig_username_column = 2
ig_data_column = 6
ig_usernames = sheet.col_values(ig_username_column)
ig_names = []
i = 2
t = 2
for user in ig_usernames:
    ig_clean = remove_prefix(user,'@')
    ig_names.append(ig_clean)
    print(ig_names)


for name in ig_names[1:]:
    if len(name) != 0:
        print(name)
        ig_url = f'https://www.instagram.com/{name}'
        print(ig_url)
        data = instagram_metrics(ig_url)
        sheet.update_cell(i, ig_data_column, data[2])
        i += 1
    else:
        i += 1 #this is here to skip over empty rows in the Sheet
        continue

    sleep(randint(3,6))

Answer 1

• 您希望将值（data[2] of data = instagram_metrics(ig_url)）从“F”列的第 2 行放入。
• 例如，您希望将instagram_metrics(ig_url) 检索到的(20, 'username', 18410, 937) 的18410 的值放到电子表格中。
• 您希望通过一次 API 调用将“500 行”的所有值放入电子表格。

如果我的理解是正确的，那么这个修改呢？在此修改中，requests 在 for 循环中创建。然后，使用update_cells() 的方法将request 放入电子表格中。

修改脚本：

请进行如下修改。

从：

for name in ig_names[1:]:
    if len(name) != 0:
        print(name)
        ig_url = f'https://www.instagram.com/{name}'
        print(ig_url)
        data = instagram_metrics(ig_url)
        sheet.update_cell(i, ig_data_column, data[2])
        i += 1
    else:
        i += 1 #this is here to skip over empty rows in the Sheet
        continue

    sleep(randint(3,6))

到：

requests = []
for name in ig_names[1:]:
    if len(name) != 0:
        print(name)
        ig_url = f'https://www.instagram.com/{name}'
        print(ig_url)
        data = instagram_metrics(ig_url)
        requests.append(data[2])
    else:
        requests.append('')
        continue

# Select a range
cell_list = worksheet.range('F2:F' + str(len(requests) + 1))

for i, cell in enumerate(cell_list):
    cell.value = requests[i]

# Update in batch
worksheet.update_cells(cell_list)

注意：

• 我认为在此修改中，sleep(randint(3,6)) 可能不需要。
• 此修改后的脚本假定您已经能够使用 Sheets API 写入和读取值。

参考：

• update_cells()