airbnb-data-collection:Airbnb列表的数据收集

时间:2021-04-22 15:11:54
【文件属性】:
文件名称:airbnb-data-collection:Airbnb列表的数据收集
文件大小:63KB
文件格式:ZIP
更新时间:2021-04-22 15:11:54
Python Airbnb网站刮板 我不再维护此脚本。 我已经有一段时间无法将脚本保持在合理的状态了,但是我知道那里有人在使用它。 如果有人想接管维护/所有权,我将非常乐意帮助您使过渡尽可能容易。 免责声明 该脚本抓取了Airbnb网站,以收集有关公司业务状况的数据。 对于使用此脚本,统计或单个页面获得的数据质量,不做任何保证。 因此,请检查您的结果。 有时,Airbnb网站会拒绝重复的请求。 我使用许多代理IP地址运行该脚本以避免被拒绝,这会花费很多钱。 恐怕我无助于查找或使用代理IP服务。 现状和最近的变化 2019年七月(3.6) 使脚本与新的AirBnB页面布局一起使用仍然存在问题。 影响此脚本的更改最大程度反映在airbnb_survey.py中的第620行附近。items_offset值随着搜索的每个新页面而增加,并且曾经是section_offset也将更改。 如果您遇到问题,并且知
【文件预览】:
airbnb-data-collection-master
----survey_report.py(8KB)
----docker()
--------Dockerfile(197B)
--------scripts()
--------requirements.txt(94B)
--------README.md(820B)
--------docker-compose.yml(583B)
----airbnb_summaries.py(12KB)
----schema_update.py(10KB)
----example.config(9KB)
----airbnb.py(22KB)
----requirements.txt(1KB)
----postgresql()
--------panels.sql(1KB)
--------schema.sql(14KB)
--------schema_current.sql(6KB)
--------functions.sql(2KB)
--------users.sql(1KB)
----airbnb_survey.py(58KB)
----reverse_geocode.py(11KB)
----LICENSE.md(1KB)
----airbnb_ws.py(6KB)
----README.md(10KB)
----airbnb_config.py(9KB)
----export_spreadsheet.py(13KB)
----.gitignore(490B)
----airbnb_s3_upload.py(9KB)
----airbnb_listing.py(29KB)
----notes.md(1KB)

网友评论