在python中挂起http POST请求该怎么办？

Question

样例代码：

socket.setdefaulttimeout(150)

MechBrowser = mechanize.Browser()
Header = {'User-Agent': 'Mozilla/5.0 (Windows; U; Windows NT 5.1; en-US; rv:1.9.2.8) Gecko/20100722 Firefox/3.6.8 GTB7.1 (.NET CLR 3.5.30729)'}
Url = "http://example.com"
Data = "Justatest=whatever&letstry=doit"
Request = urllib2.Request(Url, Data, Header)
Response = MechBrowser.open(Request)
Response.close()

我不认为上面的代码有什么问题，但是我时不时地会挂起http POST请求，这会阻止整个脚本连续运行。 我已经使用过socket.setdefaulttimeout(150)怎么不起作用？ 造成此问题的原因是什么？ 我应该怎么做才能摆脱这种情况？

Answer 1

找到了问题。

我最近一直在使用requests并且意识到在mechanize和requests中设置的timeout是“对于整个响应下载没有时间限制” ，这意味着如果连接速度很慢并且仍然有数据传输，它不会超时，这可能会使连接挂起很长时间。

因此，我要做的是用线程包装这些请求，并为这些线程设置超时，这样超时就更准确了，只要确保您清理/垃圾收集那些挂起的连接即可。

Answer 2

可能有很多原因-您要发布到的服务器可能很忙，网络拥塞等。

但是，可以通过确保发送完整的标头（丢失了Content-type标头）来从头解决问题。

Answer 3

我认为这是因为您没有设置content-length标头。 如果将请求发布到服务器，则数据将在请求的正文中提交。 由于tcp connection基于流的特性，除非您在标头中明确告知请求，否则服务器无法找出请求的长度。 在不知道您的请求何时结束的情况下，服务器必须无限期地等待。

并且timeout属性在这里不起作用，因为您的套接字未在任何recv / send操作上被阻止。 您已经完成了通过套接字写入数据的操作，但是服务器认为您还有更多要发送的数据。