如何使用 Python 发送多个 HTTP 请求

Question

我正在尝试创建一个脚本，以根据给定的根域名检查所有可能的顶级域组合。

我所做的是生成所有可能的 TLD 组合的列表，我想做的是发出多个 HTTP 请求，分析其结果并确定根域名是否具有多个活动顶级域。

示例：我的一个客户有这个活动域：

• 域.com
• 域.com.ar
• 域.ar

我尝试使用 grequests 但收到此错误：

TypeError: 'AsyncRequest' object is not iterable

代码：

import grequests


responses = grequests.get([url for url in urls])
grequests.map(responses)

Answer 1

正如我所提到的，您不能将代码作为参数。 您想要的是添加一个列表，您可以使用内联 for 循环，如下所示： [url for url in urls]

它被称为列表理解，更多信息可以在这里找到： https://docs.python.org/3/tutorial/datastructures.html#list-comprehensions

所以我只是添加了两个括号：

import grequests

responses = (grequests.get(u) for u in urls)
grequests.map(responses)