如何从 urllib 读取行（）

Question

我有使用 http 的程序，我想从 http 读取数据：

data = urllib.request.urlopen(someAddress).read()

并从中准备行列表，例如通过 readlines() 方法为文件返回行。

怎么做？

Answer 1

urlopen()返回一个对象，就像一个文件，并支持.readlines() ：

response = urllib.request.urlopen(someAddress)

lines = response.readlines():

它还支持迭代：

response = urllib.request.urlopen(someAddress)

for line in response:

您已经在响应对象上调用了.read() ； 你也可以直接调用str.splitlines() ：

lines = data.splitlines(True)

其中True告诉str.splitlines()保留行尾。

Answer 2

我通常会做类似的事情。 我使用 urllib2，但它不应该如此不同：

from urllib2 import Request, urlopen

def getPage(link, splitting = '\n'):
    request = Request(link)
    try:
        response = urlopen(request)
    except IOError:
        return -1
    else:
        the_page = response.read()
        return the_page.split(splitting)