使用 python 请求下载图像

Question

我是 python 新手。 我必须从网上下载一些图像并将其保存到我的本地文件系统中。 我注意到响应内容不包含任何图像数据。 问题仅出现在这个特定的 url 上，对于每个其他图像 url，代码都可以正常工作。

我知道最简单的解决方案就是使用另一个网址，但我仍然想问是否有人有类似的问题。

import requests
    url = 'https://assets.coingecko.com/coins/images/1/large/bitcoin.png'
    filename = "bitcoin.png"

    response = requests.get(url, stream = True)
    response.raw.decode_content = True
    with open(f'images/{filename}', 'wb') as outfile:
       outfile.write(response.content)

Answer 1

首先，使用response.text查看响应的内容，您会看到网站阻止了您的请求。

请打开 JavaScript 并重新加载页面。

然后，您可以尝试检查更改请求的用户代理是否可以解决您的问题。

response = requests.get(
    url, 
    headers = {
        'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/100.0.4896.127 Safari/537.36',
    },
    stream = True
)

如果没有，您可能需要使用可以解析 javascript 的东西来获取数据，例如selenium或Puppeteer 。