beautifulsoup 用于从网站中的基本 URL 获取所有链接答案

【问题标题】：beautifulsoup for getting all links from base URL in a websitebeautifulsoup 用于从网站中的基本 URL 获取所有链接
【发布时间】：2017-04-07 02:06:39
【问题描述】：

我想从网站基本 URL 获取所有链接/html 页面。我阅读了文档并了解到它可以使用 python Beautifulsoup 组合来实现。能否请您告诉我如何安装 BeautifulSoup 和任何其他先决步骤。安装 BeautifulSoup 后，我如何在 python 代码中使用它。如果有人可以共享python代码来实现这一点。

【问题讨论】：

看看：Web Scraping with Python

标签： python-2.7 beautifulsoup

【解决方案1】：

question 中的 sn-p 可能会帮助您从基本 url 检索所有链接。

【讨论】：

谢谢你。在运行这个之前，我觉得beautifulSoup 和pip 是必需的。我在安装时遇到问题。将首先要求提供更多详细信息。
如果您的操作系统是 Windows，只需下载包含 pip 作为捆绑模块的 python 3.6。然后将您的 python 3.6 和 python 3.6/scripts 添加到您的环境路径。然后你可以在命令提示符下使用 pip install beautifulsoup4。

【解决方案2】：

您的问题没有提供有关您的操作系统或具体目标的信息。我假设你已经安装了 Python。 pip 是管理 python 包的命令行工具。您可以在终端上运行以下命令

pip install beautifulsoup4

beautifulsoup documentation 是开始了解更多信息的好地方。

【讨论】：

Python 已安装，版本 Python 2.7.8。我正在尝试通过 cmd 安装所有内容。当我运行命令 pip install beautifulsoup 时，它说“pip”不被识别为内部或外部命令，