您如何从 a.txt 文件中读取 URL 以执行 requests.get 并将响应保存到文件中？

Question

我能够保存单个 URL 的响应，但我在 a.txt 文件中有一个 URL 列表，并且想打印所有响应。 如何从 .txt 文件中读取 URL 并将响应保存在 python 中？

这是我目前拥有的。 谢谢！

import requests

data = requests.get('www.url.com')

with open('file.txt', 'wb') as f:
    f.write(data.text)

Answer 1

您首先要从文件“infile.txt”中读取 url，然后迭代地发送请求并将数据写入输出文件“outfile.txt”。

with open('infile.txt', 'r') as f:
    urls = f.readlines()

datalist=[]
for url in urls:
    data = requests.get(url)
    datalist.append(data.text)

with open('outfile.txt', 'w') as f:
    for item in datalist:
        f.write("%s\n" % item)