使用 Python 從不同的域 url 抓取文本數據

Question

有沒有辦法只從 Python 中的不同域 url 中抓取文本數據？

例如，在本網站中，文本位於與本頁面不同的塊中。 我想寫一個 function 可以讓我同時從這兩個網站上抓取文本。 Python 有可能嗎？

Answer 1

python中唯一可能的事情是抓取頁面的整個文本。 您可以使用該代碼執行此操作。

import requests
from bs4 import BeautifulSoup
r = requests.get('https://www.businessinsider.in/tech/news/airbnb-is-getting-ripped-apart-for-asking-renters-to-donate-money-to-landlords/articleshow/76968577.cms')
soup = BeautifulSoup(r.text, 'html.parser')
texet = soup.find('html').text
print(texet)