使用 python 从网页获取应用程序的信息

Question

我目前正在尝试为 betfair 交易网站创建一个机器人，它涉及使用使用 soap 的 betfair api，而新的 API-NG 将使用 json，因此我可以了解如何访问我需要的信息。 我的问题是，使用 python，从仅使用 html 的网站获取信息的最佳方式是什么，我可以以某种方式将其转换为 xml 还是最好/最简单的方式。 Json，xml，基本上所有这些对我来说都是新的，所以任何帮助都将不胜感激。 这是我试图访问以获取马名和价格的网站之一，

http://www.oddschecker.com/horse-racing-betting/chepstow/14:35/winner

我知道有一些类似的问题，但查看上述页面的答案和来源，我并没有更接近于弄清楚如何获得我需要的信息。

Answer 1

要从网站获取 html，有两个常用的选项。

urllib2这是内置的。

requests这是第三方，但非常易于使用。

如果您需要解析您的 html，那么我建议您使用 Beautiful soup。

例子：

import requests
from bs4 import BeautifulSoup

url = 'http://www.example.com'
page_request = requests.get(url)
page_source = page_request.text
soup = BeautifulSoup(page_source)

page_source只是页面的基本html，用处不大，而soup对象可以用来自动访问页面的不同部分。