99re热这里只有精品视频,7777色鬼xxxx欧美色妇,国产成人精品一区二三区在线观看,内射爽无广熟女亚洲,精品人妻av一区二区三区

scrapy 2.3 編寫(xiě)自己的項(xiàng)目管道

2021-07-14 17:54 更新

每個(gè)item pipeline組件都是一個(gè)python類(lèi),必須實(shí)現(xiàn)以下方法:

process_item(selfitemspider)

對(duì)每個(gè)項(xiàng)管道組件調(diào)用此方法。

item 是一個(gè) item object 見(jiàn) 支持所有項(xiàng)目類(lèi)型 .

?process_item()? 必須:返回 item object 返回A ?Deferred? 或提高 ?DropItem? 例外。

丟棄的項(xiàng)目不再由其他管道組件處理。

參數(shù)
  • item (item object) -- 管道的東西

  • spider (?Spider? object) -- 爬取項(xiàng)目的蜘蛛

此外,它們還可以實(shí)現(xiàn)以下方法:

open_spider(selfspider)

當(dāng)spider打開(kāi)時(shí)調(diào)用此方法。

參數(shù)

spider (?Spider? object) -- 打開(kāi)的蜘蛛

close_spider(selfspider)

當(dāng)spider關(guān)閉時(shí)調(diào)用此方法。

參數(shù)

spider (?Spider? object) -- 關(guān)閉的蜘蛛

from_crawler(clscrawler)

如果存在,則調(diào)用此ClassMethod從 ?Crawler? . 它必須返回管道的新實(shí)例。爬蟲(chóng)對(duì)象提供對(duì)所有零碎核心組件(如設(shè)置和信號(hào))的訪問(wèn);它是管道訪問(wèn)它們并將其功能連接到零碎的一種方式。

參數(shù)

crawler (?Crawler? object) -- 使用此管道的爬蟲(chóng)程序

以上內(nèi)容是否對(duì)您有幫助:
在線筆記
App下載
App下載

掃描二維碼

下載編程獅App

公眾號(hào)
微信公眾號(hào)

編程獅公眾號(hào)