webster:适用于Node.js的可靠的高级Web爬网和抓取框架下载

韦伯斯特 概述 Webster是一个适用于Node.js应用程序的强大且可扩展的Web爬网框架。 您可以使用Webster爬网网站并从其页面中提取结构化数据。 与其他爬网框架不同的是，Webster可以抓取浏览器客户端javascript和ajax请求呈现的内容。 Docker快速入门 拉出示例docker镜像： docker pull zhuyingda/webster-demo docker run -it zhuyingda/webster-demo 这是用于爬网的简单演示（这是使用的演示）： node demo_producer.js env MOD=debug node demo_consumer.js 要求 Node.js 10.x +，Redis 适用于Linux，Mac OSX 或者，您可以在上进行部署。 安装 npm install webster 在Rasp