網頁抓取 - 彈出窗口中的多個表格

Question

如果我想從這個站點為一堆不同的團隊獲取分數 - 我是否能夠編寫一些 python 代碼來做到這一點 - 甚至認為只有當你點擊進入團隊並點擊過去的時間表時才會顯示分數？

有沒有相對簡單的方法來做到這一點？

https://results.advancedeventsystems.com/event/PTAwMDAwMjUxNTI90/divisions/111931/standings/-65298

Answer 1

如果數據都在一頁上，您可以很容易地抓取 HTML 並獲取所需的信息。

但是，如果您嘗試抓取不止一頁的數據； 看起來這個網站正在利用數據庫並根據您點擊的內容提取新信息並將其解析到網頁，這將是更多的工作。

您需要調用網站的不同部分，然后將每個部分都抓取到您的 Python 應用程序中，然后您可以在此之后以任何方式操作數據。

但是，如果您很容易嘗試從該頁面獲取它，則絕對可以使用網絡抓取工具來實現。