使用urllib2不能同时执行python中的线程

Question

您好，我正在尝试在python中执行2个线程。 这些线程发出在不同域上运行php文件的urllib2请求，但是当我这样做时，只有其中一个运行。 我如何让它们都运行？ 谢谢

import urllib2, threading
archivin=open("data.txt","r")


class hilo(threading.Thread):
    def __init__(self): 
        threading.Thread.__init__(self)

    def run(self):
        for x in archivin.readlines():
            try:
                url=urllib2.urlopen("http://www.mysite1.com/utils.php?data="+x.split(", ")[1])
            except:
                continue


class hilo2(threading.Thread):
    def run(self):
        for x in archivin.readlines():
            try:
                url2=urllib2.urlopen("http://www.mysite2.com/utils.php?data="+x.split(", ")[1])
            except:
                continue


mi_hilo1=hilo()
mi_hilo1.start()
mi_hilo2=hilo2()
mi_hilo2.start()

Answer 1

我认为问题不在于线程本身。

您将在两个位置读取同一archivin文件的所有行，而不会“回卷”该文件。

如果我尝试两次读取文件，这将在计算机上发生。

>>> f=open("virtuoso_hX2016.ini", 'r')
>>> f.tell()
0
>>> 
>>> [x for x in f.readlines()]
['[Database]\n',   
 'DatabaseFile='MaxDirtyBuffers=1333\n', 'SchedulerInterval=5\n', 
 'FreeTextBatchSize=1000\n', 'CheckpointInterval=10\n', 
 [ . . . ]
 'MinAutoCheckpointSize=200000\n', '\n', '[I18N]\n', 'XAnyNormalization=3\n']
>>> f.tell()
981
>>> [x for x in f.readlines()]
[]

如果看到，第二条阅读readlines返回一个空列表。 那是因为第一次读取将virtuoso_hX2016文件偏移量设置为文件末尾（它“消耗”了所有内容）。 还可以看到第一个tell()调用吗？ 它表示为0因为文件偏移量“指向”文件的开头。 读取文件后，第二个tell()表示981因为它指向文件的末尾（第一个读取的“消耗”了所有文件）

请参阅此查找和告诉方法教程。

在您的特定情况下，我建议（如果文件大小相当小）在启动线程之前读取文件内容，并将内容作为参数传递，或者在每个线程的run方法中打开/读取文件。