響應(yīng)狀態(tài)代碼999是什么意思？

999是雅虎網(wǎng)站用來限制請(qǐng)求的自定義響應(yīng)狀態(tài)代碼。嘗試使用下載延遲來降低爬行速度 ?2? （或更高）在你的蜘蛛：

class MySpider(CrawlSpider):

    name = 'myspider'

    download_delay = 2

    # [ ... rest of the spider code ... ]

或者通過在項(xiàng)目中設(shè)置全局下載延遲 DOWNLOAD_DELAY 設(shè)置。