Python 3：为什么要使用 urlparse/urlsplit [关闭]

Question

我不确定这些模块的用途。我知道他们将各自的 url 拆分为其组件，但为什么这会有用，或者什么是何时使用 urlparse 的示例？

Answer 1

只有在需要参数时才使用urlparse。我已经在下面解释了为什么需要参数。

Reference

urllib.parse.urlsplit(urlstring, scheme='', allow_fragments=True)

这类似于 urlparse()，但不会将参数从 网址。这通常应该用来代替 urlparse() 如果更多 最近的 URL 语法允许将参数应用于每个部分 需要 URL 的路径部分（请参阅RFC 2396）。

主机名对于存储在变量中以供以后使用或添加参数、查询主机名以在抓取时获取您想要的网页总是有用的。

关于参数：

仅供参考：根据 RFC2396，url 中的参数

对当前客户端应用程序的广泛测试表明， 大多数已部署的系统不使用“;”表示的字符 尾随参数信息，以及分号的存在 在路径段中不影响该路径的相对解析 分割。因此，参数已作为单独的参数被删除 组件，现在可能出现在任何路径段中。他们的影响有 已从解析相对 URI 的算法中删除 参考。

参数在抓取时很有用， 例如如果网址是http://www.example.com/products/women?color=green

当你使用urlparse时，你会得到参数。现在您必须将其更改为men，因此它将是http://www.example.com/products/men?color=green 和kids、girl、boy 等等。