【发布时间】：2012-07-27 07:22:04
【问题描述】：
我希望从一些网站上抓取一些内容进行研究，我希望使用 python 和网络抓取可以加快我的进程。我之前在一个小项目中使用过 python 和 beautiful soup 将 xml 从一种格式转换为另一种格式。
【问题讨论】：
标签： python
【发布时间】：2012-07-27 07:22:04
【问题描述】：
根据您要提取的数据结构的冗余程度，您可以使用多种工具。
- 如果您要提取始终存储在相同 DOM 结构中的数据，Scrapy 可以胜任。
- 如果数据稀疏并且存储在不同的地方，也许BeautfulSoup4 或lxml 可以帮助你。
- 如果数据是一些JS代码生成的，请看Selenium
以下是一些您可能会觉得有用的资源：
【讨论】：
-
谢谢，这些很有用