如何使用 python 请求和 BeautifulSoup 在网站上的 html 中查找隐藏值

Question

我试图弄清楚如何找到仅在单击网页上的按钮时才显示的隐藏值。我在网络日志中看不到任何发送另一个获取请求以显示隐藏值的内容。如何获取网页上的隐藏值？

这是我的代码：

product_page = self.url_session.get(
            'https://www.finishline.com/store/product/nike-mamba-fury-basketball-shoes/prod2797512',
            headers={
                'accept': 'text/html,application/xhtml+xml,application/xml;q=0.9,image/avif,image/webp,image/apng,*/*;q=0.8,application/signed-exchange;v=b3;q=0.9',
                'accept-encoding': 'gzip, deflate, br',
                'accept-language': 'en-US,en;q=0.9',
                'cache-control': 'max-age=0',
                'sec-fetch-dest': 'document',
                'sec-fetch-mode': 'navigate',
                'sec-fetch-user': '?1',
                'upgrade-insecure-requests': '1',
                'user-agent': user-agent
            },
            params={
                'styleId': f'{styleId}',
                'colorId': f'{colorId}'
            },
            cookies={
                '_abck': cookie # This gets a cookie
            }
        )

我试图在 html 中显示“cartCatalogRefIds”值。

Answer 1

你需要通过id找到元素，然后提取值：

from bs4 import BeautifulSoup
soup = BeautifulSoup(product_page.body)
value= soup.find(id='cartCatalogRefIds')['value']

你有你的价值