-
reqscraper是一款轻量级的封装工具,用于整合Request和X-Ray JS
资源介绍
要求者
用于Request和X-Ray JS的轻量级包装。
样品用量
此模块包含用于发出HTTP请求的和用于轻松抓取网站的 ,分别称为req和scrape 。
两者都返回承诺。 req具有内部控制结构,最多可重试5次以确保故障安全。
简短的API文档
req(options) ,其中options是一个请求选项对象。 详细信息请参见 。
scrape(dyn, url, scope, selector) ,其中dyn是使用x-ray-phantom动态刮擦的布尔值; url是页面url, scope和selector是一些HTML选择器。 有关详细信息,请参见 。
scrapeCrawl(dyn, url, selector, tailArr, [limit]) ,其中dyn对于使用x-ray-phantom进行动态抓取是true;
req(options)
方便的request