尝试使用beautifulsoup抓取iframe

Question

我想抓取视频，但beautifulsoup并不等待iframe加载。 我尝试使用Selenium，但是Google Webdriver等待整个页面加载，这需要花费很长时间。 页面加载完成后，我也无法获取页面源代码。

这是我用beautifulsoup尝试过的代码，但一无所获

def get_vidCode_from_source(source_url):
    source_code = requests.get(source_url)
    plain_text = source_code.text
    soup = BeautifulSoup(plain_text,"html.parser")
    print(soup.find('iframe'))

get_vidCode_from_source('http://anilinkz.io/one-piece-episode-769?src=3')

因此，尝试在iframe中获取视频链接：

除了硒，还能获得iframe有什么好处？

Answer 1

我知道这有点旧，但是要使用硒并获取页面源代码，请使用以下代码：

from selenium import webdriver
browser = webdriver.Chrome()
browser.get('http://anilinkz.io/one-piece-episode-769?src=3')
soup = BeautifulSoup(browser.page_source, "lxml")
browser.close()
for x in soup.find_all('iframe'):
    print(x)