一个小小的node爬虫，基于crawler框架

一个小小的node爬虫，基于crawler框架

介绍

本人编写的一个小小的node定向爬虫，基于crawler框架。用于展示交流，如果喜欢请给一个Star。

支持

爬取数据并记录为json文件-图片到本地保存图书为.md文件

实现

app.js文件内main函数

//getJianshu() // 读取简书首页文章 //getImage() //爬取憨憨三次元美女首页图片 //getCnBlog() //爬取博客园4000篇博客目录 //getBookList() //获取笔趣阁首页所有的小说 //getBookJson('我是至尊',__dirname + `/data/book/我是至尊/info.json`) //读取我是至尊的本地info.json-章节    //getBookInfo('https://qu.la/book/3952/')   //爬取我是至尊章节目录

开始

安装依赖 npm i运行服务node appz

**注意：**启动第二步前，请根据需要对app.js 里面的main方法进行修改

该项目只是用于学习交流所用。请大家温柔对待世界...

版权声明：本文内容由网络用户投稿，版权归原作者所有，本站不拥有其著作权，亦不承担相应法律责任。如果您发现本站中有涉嫌抄袭或描述失实的内容，请联系我们jiasou666@gmail.com 处理，核实后本网站将在24小时内删除侵权内容。