Name		Name	Last commit message	Last commit date
Latest commit History 8 Commits
.idea		.idea
api		api
doc		doc
feature		feature
scheduler		scheduler
.gitignore		.gitignore
LICENSE		LICENSE
README.md		README.md
package.json		package.json

Repository files navigation

设计思路

本项目由 Node.js 开发。该框架主要适用高并发，但每次爬取数据量不大的分布式爬虫

用到的技术包括

PM2 负责开启和监控应用；
RabbitMQ 负责任务调度；
Server 由 Express 编写

项目说明

详细的说明请转到个人博客查看。欢迎您拍砖和 star。

About

高并发但每次爬取数据量不大的分布式爬虫。

Apache-2.0 license

Report repository

Releases

No releases published

Packages

No packages published

Languages

JavaScript 100.0%