如何將數據傳遞給scrapinghub？

Question

我正在嘗試在scrapinghub上運行一個抓癢的蜘蛛，我想傳遞一些數據。 我正在使用他們的API來運行Spider：

http://doc.scrapinghub.com/api/jobs.html#jobs-run-json

他們有一個job_settings選項，這似乎很相關，但是我不知道如何訪問Spider類中的job_settings數據。 這里正確的方法是什么？

Answer 1

此job_settings應直接合並到Scrapy設置中 ，並具有更高的優先級（IIRC為40 ）。

可以通過Spider實例的.settings屬性訪問Scrapy設置，例如，如果self是scrapy.Spider實例，則可以使用self.settings 。