使用 python 请求模块检索评论

Question

我试图在 web 页面中找到所有评论。

import requests

with requests.session() as r:
    headers = {'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64; rv:88.0) Gecko/20100101 Firefox/88.0'}
    r = requests.get('https://www.example.com', verify=False, headers=headers)
    print(r)

该脚本返回页面的所有源代码。 但是，我只对查找注释行感兴趣。 任何人都可以用正则表达式帮助我找到注释行。 或者有没有更好的方法来找到这个？

Answer 1

你可以试试BeautifulSoup4 ，它内置了 function 来识别评论。

这是一个演示了这一点的 StackOverflow： 如何使用 Beautiful Soup 查找所有评论