使用 Python 获取“实时”雅虎财经数据

Question

我一直在使用 urllib2 和直截了当的文本函数来读取彭博社的货币价格，以读取存储价格的 hmtl 部分。可能不会因效率而赢得任何奖励，但它已经适合我的目的。这是从页面被抓取的代码中提取的。

    #grab the html source as a big string

    response = urllib2.urlopen('https://www.bloomberg.com/quote/CHFGBP:CUR')

    page = response.read()

    #locate the html where price is stored

    pricestart = page.find('meta itemprop="price" content=')+len('meta itemprop="price" content=')

    #plus twenty characters

    price = page[pricestart:pricestart+20] 

    #find the data between double quotes in that substring

    pricesplit = price.split('"')

    #the 1st element of the output array is the price, cast it as a float

    priceAsFloat = float(pricesplit[1])

    #and save it to the current prices dictionary

    pricesCurr[keys] = priceAsFloat

我想为 Yahoo Finance 做同样的事情，因为它的更新频率更高，给人一种“实时”价格的感觉（我知道它们会延迟 15 分钟）。

但是，我在bloomberg html 上工作的方法不适用于雅虎源

查看这个网址，例如https://uk.finance.yahoo.com/quote/CHFJPY=X?p=GBPJPY=X

检查 urllib2.urlopen 返回的 html - 当前价格不在要抓取的文本中。或者至少我找不到它！

任何人都可以就如何抓取 yahoo Finance html 提供任何建议吗？

Answer 1

我也一直在处理雅虎财务数据。您正在寻找的价值就在那里，但它被埋没了。以下是我用来抓取雅虎财经的代码摘录：

from bs4 import BeautifulSoup
import urllib3 as url
import certifi as cert


def get_stock_price(name):
    http = url.PoolManager(cert_reqs='CERT_REQUIRED', ca_certs=cert.where())
    html_doc = http.request('GET', 'https://finance.yahoo.com/quote/' + name + '?p=' + name)
    soup = BeautifulSoup(html_doc.data, 'html.parser')
    return soup.find("span", class_="Trsdu(0.3s) Fw(b) Fz(36px) Mb(-4px) D(ib)").get_text()

其中name 是股票的简写名称（例如“tsla”）。为了找到要抓取的适当值，我手动向下钻取了 html，直到找到突出显示我正在搜索的值的部分。上面的代码适用于您提供的网站。