繁体   English   中英

蜘蛛的Scrapy domain_name

[英]Scrapy domain_name for spider

从Scrapy教程中:

domain_name:标识蜘蛛。 它必须是唯一的,即不能为不同的Spider设置相同的域名。

这是否意味着domain_name必须是有效的域名,例如

domain_name ='example.com'

或者我可以说

domain_name = 'ex1'

问题是我有一个使用域名的蜘蛛

domain_name = 'whitecase.com'

现在,我创建了一个新的蜘蛛作为CrawlSpider的实例,并将其命名为

domain_name = 'wc2'

但出现错误"could not find spider for domain "wc2""

要回答我自己的问题:

domain_name ='wc2'

作品。

如您domain_namedomain_name不应该是真实的。 在调用蜘蛛进行爬网时使用。

暂无
暂无

声明:本站的技术帖子网页,遵循CC BY-SA 4.0协议,如果您需要转载,请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.

 
粤ICP备18138465号  © 2020-2024 STACKOOM.COM