如何从网站上获取下载链接

【问题标题】：How can I grab download links from a website如何从网站上获取下载链接
【发布时间】：2015-07-28 10:57:26
【问题描述】：

有没有办法从网站获取下载链接并将其放入文本文件中？稍后使用 wget 下载软管文件？

【问题讨论】：

【解决方案1】：

您需要下载网站的源代码。您可以为此使用wget link-of-the-webiste-you-want-to-grab-links-from。你可以像这样发送链接：sed -n 's/.*href="\([^"]*\).*/\1/p' file

this questions 了解详情。

【讨论】：

【解决方案2】：

有了这个，您可以下载 jpg 文件，而不是 jpg，您可以提供 任何文件格式 应该存在于 source_file 中。您的下载链接列表将在 link.txt

中

grep -Po 'href=\"\/.+\.jpg' source_file | sed -n 's/href="\([^"]*\)/\1/p' >link.txt; wget -i link.txt

【讨论】：