W3Cschool
恭喜您成為首批注冊用戶
獲得88經(jīng)驗值獎勵
Scrapy 可重復使用 item pipelines 用于下載附加到特定項目的文件(例如,當您 爬取 產(chǎn)品并希望在本地下載其圖像時)。這些管道共享一些功能和結構(我們將它們稱為媒體管道),但通常您可以使用文件管道或圖像管道。
兩條管道都實現(xiàn)了以下功能:
圖像管道有一些用于處理圖像的額外功能:
這些管道還保留當前正在計劃下載的媒體URL的內(nèi)部隊列,并將到達的包含相同媒體的響應連接到該隊列。這樣可以避免在多個項目共享同一媒體時多次下載同一媒體。
Copyright©2021 w3cschool編程獅|閩ICP備15016281號-3|閩公網(wǎng)安備35020302033924號
違法和不良信息舉報電話:173-0602-2364|舉報郵箱:jubao@eeedong.com
掃描二維碼
下載編程獅App
編程獅公眾號
聯(lián)系方式:
更多建議: