使用 Beautifulsoup 抓取 Craigslist 位置或城市的更好方法是什么？

Question

我真的是 Python 新手，从昨天开始我就尝试使用 Beautifulsoup抓取craigslist 帖子的位置（城市或谷歌地图信息）。

我尝试了一种在网站上找到的方法： 使用美丽的汤从非类部分获取数据

但是当我使用：

for url in (url_list):

    page2 = requests.get(url)
    soup = BeautifulSoup(page2.content, 'html.parser')
    for address in soup.findAll("div", {"class": "mapaddress"}):
            addressText = ''.join(address.findAll(text=True))

    location.append(addressText)

我有NameError: name 'addressText' is not defined在最后一行，我不明白为什么。

如果有人可以提供帮助或提供其他解决方案，我将不胜感激，

非常感谢，

Answer 1

我认为问题在于您没有正确缩进代码。 尝试将其修改为

for address in soup.findAll("div", {"class": "mapaddress"}):
        addressText = ''.join(address.findAll(text=True))  
        location.append(addressText)