新浪微博爬虫,用python爬取新浪微博数据-python

时间:2021-06-18 18:19:57
【文件属性】:
文件名称:新浪微博爬虫,用python爬取新浪微博数据-python
文件大小:102KB
文件格式:ZIP
更新时间:2021-06-18 18:19:57
Web爬虫 本程序可以连续爬取一个或多个新浪微博用户(如胡歌、迪丽热巴、郭碧婷)的数据,并将结果信息写入文件或数据库。写入信息几乎包括用户微博的所有数据,包括用户信息和微博信息两大类。
【文件预览】:
weiboSpider-master
----.github()
--------stale.yml(776B)
--------ISSUE_TEMPLATE()
--------workflows()
----requirements.txt(56B)
----weibo_spider()
--------downloader()
--------config_util.py(7KB)
--------datetime_util.py(259B)
--------user.py(757B)
--------writer()
--------__init__.py(0B)
--------user_id_list.txt(118B)
--------spider.py(16KB)
--------__main__.py(158B)
--------config_sample.json(753B)
--------parser()
--------logging.conf(941B)
--------weibo.py(989B)
----CONTRIBUTING.md(3KB)
----setup.py(821B)
----README.md(17KB)
----docs()
--------FAQ.md(4KB)
--------settings.md(10KB)
--------academic.md(837B)
--------automation.md(4KB)
--------cookie.md(797B)
--------example.md(7KB)
--------contributors.md(2KB)
--------userid.md(2KB)
----tests()
--------test_parser()
--------testdata()
--------__init__.py(0B)
----.gitignore(96B)

网友评论