无法使用 BeautifulSoup 从隐藏标签中刮取“价值”

Question

我试图从这个链接中获取 6,550 英镑的基本价格：https://www.plates4less.co.uk/private-plate_o/CSG1S 它位于一个名为 BasePrice 的隐藏输入中，当我查看页面源时，'6550' 位于一个名为 value 的属性中：

<input type="hidden" name="BasePrice" id="BasePrice" value="6550">

我的代码是：

url = 'https://www.plates4less.co.uk/private-plate_o/CSG1S'
req = session.get(url, headers=headers)
bsObj = BeautifulSoup(req.text, features="html.parser")
price = bsObj.find("input", {"name" : {"BasePrice"}})
print(price['value'])

但它返回KeyError: 'value'

当我运行它时（即检索标签但没有尝试访问“值”：

url = 'https://www.plates4less.co.uk/private-plate_o/CSG1S'
req = session.get(url, headers=headers)
bsObj = BeautifulSoup(req.text, features="html.parser")
price = bsObj.find("input", {"name" : {"BasePrice"}})
print(price)

我明白了：

<input id="BasePrice" name="BasePrice" type="hidden"/>

为什么我注意到可以访问value 属性？

Answer 1

您在 paga 上看到的数据是从外部 URL 加载的。要加载基本价格，您可以使用以下示例：

import json
import requests

# CSG1S is from your base URL
url = "https://www.plates4less.co.uk/apiv3/TransferOptions/CSG1S"

data = requests.get(url).json()

# uncomment to see all data:
# print(json.dumps(data, indent=4))

print(data["data"]["registrationNumber"]["displayedBPrice"])

打印：

6550.0