[英]Scrapy domain_name for spider
從Scrapy教程中:
domain_name:標識蜘蛛。 它必須是唯一的,即不能為不同的Spider設置相同的域名。
這是否意味着domain_name
必須是有效的域名,例如
domain_name ='example.com'
或者我可以說
domain_name = 'ex1'
問題是我有一個使用域名的蜘蛛
domain_name = 'whitecase.com'
現在,我創建了一個新的蜘蛛作為CrawlSpider的實例,並將其命名為
domain_name = 'wc2'
但出現錯誤"could not find spider for domain "wc2""
要回答我自己的問題:
domain_name ='wc2'
作品。
如您domain_name
, domain_name
不應該是真實的。 在調用蜘蛛進行爬網時使用。
聲明:本站的技術帖子網頁,遵循CC BY-SA 4.0協議,如果您需要轉載,請注明本站網址或者原文地址。任何問題請咨詢:yoyou2525@163.com.