從下一頁抓取數據不會更改URL
[英]Crawl data from next page doesn't change URL
問題描述
我正在嘗試更改此站點中的頁面以爬網信息。 但是當我單擊下一頁時，它不會更改URL：
直到現在我的代碼：
[...]
paging = response.css('span id.next::attr(href)').extract()
if paging:
yield scrapy.Request(paging, callback=self.parse_links)
我不知道如何從這樣的網站進行爬網。 請幫幫我，謝謝
1 個解決方案
解決方案1
1 已采納 2018-06-27 04:46:16
如何使用請求或其他模塊從URL不變的頁面獲取數據？
[英]How to use requests or other module to get data from a page where the url doesn't change?
無法將主頁加載到 webscrape，下一頁不會更改 url
[英]Unable to load main page to webscrape and next page doesn't change url
單擊“下一頁”按鈕時，抓取 URL 不會更改的網站
[英]Scraping a website that URL doesn't change when clicking on "next page" button
聲明:本站的技術帖子網頁，遵循CC BY-SA 4.0協議，如果您需要轉載，請注明本站網址或者原文地址。任何問題請咨詢:yoyou2525@163.com.