1 Star 0 Fork 0

牛气腾腾 / node-crawler

Create your Gitee Account
Explore and code with more than 8 million developers,Free private repositories !:)
Sign up
The current repository's web page is accessible only to members. If you need to make it public, please ask author Yakima to submit applications.
Clone or Download
Cancel
Notice: Creating folder will generate an empty file .keep, because not support in Git
Loading...
README.md

node-crawler

介绍

nodejs写的爬虫定时任务,用于爬取gitee推荐项目。 关于本项目的详细介绍,可以参阅《用nodejs写一个简单的爬虫爬取gitee上的推荐项目》

软件架构

node v14.15.5

安装教程

  1. 下载源码:git clone https://gitee.com/bulls-cows/node-crawler.git
  2. 进入项目根目录,安装依赖,如果安装过pm2的话执行npm install,否则执行npm run installDependencies
  3. 本地运行:执行npm run debug
  4. 服务器上部署。执行npm run start启动服务,并且执行npm run getShellUsedToStartProjectAfterReboot来保证服务会在服务器开机后自动重启。

使用说明

需要使用mysql数据库的话可以打开src/config/database.config.js文件修改其中的配置为真实配置, 然后修改src/index.js文件中被注释掉的数据库相关代码, 其中的sql语句根据实际需要来写。

参与贡献

  1. Fork 本仓库
  2. 新建 Feat_xxx 分支
  3. 提交代码
  4. 新建 Pull Request

License

MIT License

Repository Comments ( 0 )

Sign in to post a comment

About

nodejs写的爬虫定时任务 expand collapse
NodeJS
MIT
Cancel

Releases

No release

Contributors

All

Activities

Load More
can not load any more
NodeJS
1
https://gitee.com/bulls-cows/node-crawler.git
git@gitee.com:bulls-cows/node-crawler.git
bulls-cows
node-crawler
node-crawler
master

Search

103111 552b83b3 1850385 103110 ed87a847 1850385