Python BS4 - 使用变量作为键和值写入 JSON

Question

所以我正在做一个小的网络抓取项目，我正在尝试遍历一个表。然后将表的左侧（tr）作为键，将表的右侧（td）作为该键的值放入 JSON 文件。它有点工作，这意味着它写入了正确的键/值。但它只写入表格中的最后一个单元格。

我尝试以几种不同的方式写入 JSON 文件，我在 google 上找到了一些关于它的帖子，但没有任何工作。

from bs4 import BeautifulSoup
import requests
import json


def writeToJSONFile(path, fileName, data):
    filePathNameWExt = './' + path + '/' + fileName + '.json'
    with open(filePathNameWExt, 'w') as fp:
        json.dump(data, fp, ensure_ascii=True)

path = './'
fileName = 'test'
data = {}

r = requests.get('https://www.newegg.com/msi-mpg-b550-gaming-carbon-wifi/p/N82E16813144322')

soup = BeautifulSoup(r.text, 'lxml')

tables = soup.findAll("table", class_='table-horizontal')
for x in range(len(tables)):
    for tr, td in zip(soup.findAll('table', class_='table-horizontal')[x].findAll('th'), soup.findAll('table', class_='table-horizontal')[x].findAll('td')):
        tr_item = tr.text
        td_item = td.text
        data["chassi"] = []
        data["chassi"].append({
            tr_item: td_item
        })

        writeToJSONFile(path, fileName, data)

我正在尝试遍历this 网站的specs。

编辑： 这是我在 JSON 文件中得到的结果：

{ "chassi": [{ "Date First Available ": "June 15, 2020" }] }

Answer 1

from bs4 import BeautifulSoup
import requests
import json


def writeToJSONFile(path, fileName, data):
    filePathNameWExt = './' + path + '/' + fileName + '.json'
    with open(filePathNameWExt, 'w') as fp:
        json.dump(data, fp, ensure_ascii=True)

path = './'
fileName = 'test'
data = {}

r = requests.get('https://www.newegg.com/msi-mpg-b550-gaming-carbon-wifi/p/N82E16813144322')

soup = BeautifulSoup(r.text, 'lxml')
data["chassi"] = []
tables = soup.findAll("table", class_='table-horizontal')
for x in range(len(tables)):    
    for tr, td in zip(soup.findAll('table', class_='table-horizontal')[x].findAll('th'), soup.findAll('table', class_='table-horizontal')[x].findAll('td')):
        tr_item = tr.text
        td_item = td.text
        
        data["chassi"].append({
            tr_item: td_item
        })

if len(data["chassi"]) > 0:
    writeToJSONFile(path, fileName, data)