【文件属性】:
文件名称:ScrapeEverything:RESTful API,可抓取JavaScript呈现的html
文件大小:22.4MB
文件格式:ZIP
更新时间:2021-04-16 12:06:15
C#
刮擦一切
RESTful API,它接受url输入并返回页面的已刮html文本(包括未直接解析JavaScript呈现的html)
关于该项目
志向
有许多第三方库可以抓取网站的html数据,但是大多数第三方库都无法抓取JavaScript动态生成的内容。 此API旨在解决此问题并简化“给定url以字符串形式返回html的过程”
技术领域
语言:C#
框架:ASP.NET
网页搜罗:Selenium PhantomJS
测试:邮递员
部署:/
地位
进行中
任务
设置.NET环境
设置API路由
刮JavaScript HTML
提供基本登录
代管
如何使用
API URL是https://localhost:44315/api/scrape
获取请求:
接受url参数(记住对url进行编码) 样本
https://localhost:44315/api/scrape?u