[英]How to use Multiprocessing with Selenium in Python
我正在尝试在python中使用硒处理多重处理。 我的代码如下:
from selenium import webdriver
from multiprocessing import Pool
import xlwings as xw
driver = webdriver.Chrome('chromedriver.exe')
driver.get("https://example.com")
wb = xw.Book('my_file.xlsm')
sht = wb.sheets["Sheet1"]
final_list = []
search = driver.find_element_by_id("ContentPlaceHolder1_txtByName")
for item in search:
z = item.find_element_by_class_name("valuetext")
info = z.find_element_by_tag_name("span")
final_list.append(info.text)
def automate(num):
col = num
list_item = final_list[num]
sht.range(1, col).value = each
if __name__ == '__main__':
p = Pool(processes=4)
data = p.map(automate,range(1,20))
我遇到的问题是网页的这四个过程中的每个过程都被重新打开了,我不明白为什么。 如果p.map
仅针对automate
函数,那么为什么其余代码会在每个进程中运行?
我仍然对多处理还不陌生,所以不确定这是否是它的工作方式吗?是否有另一种方法可以确保进程仅针对函数本身,还是可以使用线程?
声明:本站的技术帖子网页,遵循CC BY-SA 4.0协议,如果您需要转载,请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.