如何在网站上抓取地图以获取存储在弹出窗口中的信息？

Question

我对网络抓取相对较新，所以我不确定在特定场景中应该使用哪种方法来收集信息，其中信息存储在地图上并显示在弹出窗口中，例如： https://utils。 ocim.fr/cartocim2/

基本上 ：

1. 该网站显示了地图，
2. 联系信息显示在弹出窗口中，
3. 单击地理标记按钮时会出现一个弹出窗口，
4. 目标信息是存储在该弹出窗口中的那些行

我正在考虑使用selenium + xpath方法，但我不确定处理方式：

1. 有这么多必须点击的按钮
2. 与弹出窗口。

您是否有任何资源/提示来建议我知道从哪里开始？

Answer 1

好容易

这是一个开始，但随着标记开始重叠，它变得有点复杂，因此单击元素失败，可能需要添加一个步骤来放大等

from selenium import webdriver
import requests
import pandas as pd
url_base = r'https://utils.ocim.fr/cartocim2/'



driver = webdriver.Chrome(r'C:\Users\bsimpson\Downloads\chromedriver_win32\chromedriver.exe')
driver.get(url_base) #open page

#find all the icons
links = driver.find_elements_by_css_selector('div.leaflet-pane.leaflet-marker-pane > img')



import time

output = [] #temp table to append into
for i in range(5): #chaneg to len(links) when done
    links[i].click() #click on first icon
    output.append(driver.find_elements_by_xpath('//*[@id="popup-header"]')[0].text) #get the text of the name
    time.sleep(1) #sleep
    driver.find_element_by_css_selector('#initmap').click() #reset the map - needed as without it the next icon might not be on the screen due to map relocation or popup overlap
    time.sleep(1)