node-digger - 实现简单的node爬虫工具
node爬虫
实现简单的node爬虫工具
执行
终端下执行:
node demo-1.js
原理
- 模拟浏览器访问
- 截取指定内容
- 按规则写入本地
所需技能
- 基本逻辑分析
- Javascript & 基本正则
- Node.js (Buffer, fs, path, URL, http[s])
目录
demo-1
抓取首页文件demo-2
抓取整站demo-3
指定内容抓取(开发中)
本文由用户 jopen 自行上传分享,仅供网友学习交流。所有权归原作者,若您的权利被侵害,请联系管理员。
转载本站原创文章,请注明出处,并保留原始链接、图片水印。
本站是一个以用户分享为主的开源技术平台,欢迎各类分享!