| 注册
请输入搜索内容

热门搜索

Java Linux MySQL PHP JavaScript Hibernate jQuery Nginx
jopen
9年前发布

node-digger - 实现简单的node爬虫工具

node爬虫

实现简单的node爬虫工具

执行

终端下执行:

node demo-1.js

原理

  1. 模拟浏览器访问
  2. 截取指定内容
  3. 按规则写入本地

所需技能

  • 基本逻辑分析
  • Javascript & 基本正则
  • Node.js (Buffer, fs, path, URL, http[s])

目录

  • demo-1 抓取首页文件
  • demo-2 抓取整站
  • demo-3 指定内容抓取(开发中)

项目地址: https://github.com/zhuowenli/node-digger

 本文由用户 jopen 自行上传分享,仅供网友学习交流。所有权归原作者,若您的权利被侵害,请联系管理员。
 转载本站原创文章,请注明出处,并保留原始链接、图片水印。
 本站是一个以用户分享为主的开源技术平台,欢迎各类分享!
 本文地址:https://www.open-open.com/lib/view/open1452573120214.html
Node.js 开发 node-digger