纪念一下学写pipeline时脑子里的坑

时间:2023-03-08 18:58:44

用的是filespipeline,用的存储地址是images的地址

测试煎蛋ooxx首页,shell测试的时候返回很多列表,但是实际爬的时候一直只返回一条,很烦,一直测一直测,就是不行,后来才发现,首页已经刷新了就是只有一条。。。。

def file_path 写不好的话,会被def item_completed当成无效文件过滤掉

file path只是写一个路径名,只是一个路径名,不用考虑别的