如何获取网站上图像的绝对路径

Question

在 Firefox 中，可以右键单击图像并选择“复制图像位置”。即使在图像的 src 属性中仅提供相对路径，这也允许获取绝对图像路径。 是否可以通过编程方式获取此绝对路径？它存储在哪里？

我用Python3，请求访问网站，美汤解析html。

Answer 1

简单的解决方案

from bs4 import BeautifulSoup
from requests import get

url = 'https://example.com/'
response = get(url)
soup = BeautifulSoup(response.content, 'html.parser')

# converting to a set will prevent duplicates
images = set([img['src'] for img in soup.find_all('img') if hasattr(img, 'src')])

for img in images:
    print(img)

扩展解决方案

对于使用相对路径（或外部主机、cdn 等）的图像，我们可以使用下面的代码清除大部分。

注意：这在使用本地 URI (file:///temp/web/img1.png) 时不起作用

此代码使用validators 包，因此请使用pip install validators 安装

from bs4 import BeautifulSoup
from requests import get
from os.path import join, normpath
import validators

url = 'https://example.com/'
response = get(url)
soup = BeautifulSoup(response.content, 'html.parser')

images = set([img['src'] for img in soup.find_all('img') if hasattr(img, 'src')])

list_of_img_paths = []

for img in images:
    if not validators.url(url):  # If NOT a valid URL
        # Here we can assume we are dealing with a relative path
        formatted_url = normpath(join(url, img))  # format a valid url
        list_of_img_paths.append(formatted_url)  # add to list
    else:
        list_of_img_paths.append(img)