scraper:固件刮板

时间:2021-05-09 09:19:07
【文件属性】:
文件名称:scraper:固件刮板
文件大小:48KB
文件格式:ZIP
更新时间:2021-05-09 09:19:07
Python 介绍 这是一个固件抓取程序,旨在从受支持的设备供应商网站下载固件映像和关联的元数据。 依存关系 用法 配置firmware/settings.py文件。 如果不应将有关下载固件的元数据插入SQL服务器,请SQL_SERVER 。 要运行特定的刮板,例如dlink : scrapy crawl dlink 要使用运行最多4个所有的scraper: parallel -j 4 scrapy crawl ::: `for i in ./firmware/spiders/*.py; do basename ${i%.*}; done`
【文件预览】:
scraper-master
----scrapy.cfg(97B)
----ftp.sh(760B)
----firmware()
--------pipelines.py(8KB)
--------spiders()
--------items.py(512B)
--------__init__.py(0B)
--------settings.py(535B)
--------loader.py(3KB)
----TODO.txt(190B)
----.gitignore(22B)
----README.md(697B)
----LICENSE.txt(1KB)

网友评论