Selenium 和无头 chrome 通过 python 下载

Question

因此，通过无头 chrome 与 selenium 下载文件的问题似乎仍然是一个问题，因为一个多月前在这里问过没有答案。 但我不明白他们是如何实现 bug 线程中的 js 的。 有没有我可以添加的选项或当前的修复程序？ 位于此处的原始错误页面截至今天 10/22/17 我所有的东西都是最新的

在蟒蛇中：

from selenium import webdriver


options = webdriver.ChromeOptions()

prefs = {"download.default_directory": "C:/Stuff", 
         "download.prompt_for_download": False,
         "download.directory_upgrade": True, 
         "plugins.always_open_pdf_externally": True
         }

options.add_experimental_option("prefs", prefs)
options.add_argument('headless')
driver = webdriver.Chrome(r'C:/Users/aaron/chromedriver.exe', chrome_options = options)

# test file to download which doesn't work
driver.get('http://ipv4.download.thinkbroadband.com/5MB.zip')

如果删除无头选项，这没有问题。

我尝试下载的实际文件是位于 .aspx URL 的 PDF。 我正在通过执行 .click() 下载它们，除了无头版本之外，它效果很好。 hrefs 是 javascript do_postback 脚本。

Answer 1

为什么不找到锚点href，然后使用get请求下载文件。 这样它将在无头模式下工作并且速度会快得多。 我已经在 C# 中做到了。

def download_file(url):
    local_filename = url.split('/')[-1]
    # NOTE the stream=True parameter
    r = requests.get(url, stream=True)
    with open(local_filename, 'wb') as f:
        for chunk in r.iter_content(chunk_size=1024): 
            if chunk: # filter out keep-alive new chunks
                f.write(chunk)
                #f.flush() commented by recommendation from J.F.Sebastian
    return local_filename

Answer 2

我相信现在 Chromium 支持此功能（如您链接到错误票证），由 chromedriver 团队添加对该功能的支持。 有一个开放的车票 在这里，但它不会出现在目前具有较高的优先级。 请所有需要此功能的人给它 +1！

Answer 3

对于那些不在上面链接的铬票上或尚未找到解决方案的人。 这对我有用。 Chrome 已更新到 v65，并且 chromedriver/selenium 都是截至 2018 年 4 月 16 日的最新版本。

    prefs = {'download.prompt_for_download': False,
             'download.directory_upgrade': True,
             'safebrowsing.enabled': False,
             'safebrowsing.disable_download_protection': True}

    
    options.add_argument('--headless')
    options.add_experimental_option('prefs', prefs)
    driver = webdriver.Chrome('chromedriver.exe', chrome_options=options)
    driver.command_executor._commands["send_command"] = ("POST", '/session/$sessionId/chromium/send_command')
    driver.desired_capabilities['browserName'] = 'ur mum'
    params = {'cmd': 'Page.setDownloadBehavior', 'params': {'behavior': 'allow', 'downloadPath': r'C:\chickenbutt'}}
    driver.execute("send_command", params)

如果下载时遇到 Failed-file path too long 错误，请确保下载路径没有尾随空格或斜杠\\或反斜杠。 路径也必须仅使用反斜杠。 我不知道为什么。