web站点抓取。主要是抓取一些文档型网站 目前是抓取的http://w3school.com.cn/ 抓取了6688个页面 用时大约140s 起初是因为chm版的太老了好多东西没有及时更新,所以就写了这个小程序来获取最新的版本
需要依赖的 npm iconv-lite
node grabWeb.js 路径
| Name | Name | Last commit message | Last commit date | |
|---|---|---|---|---|
Latest commit | ||||
web站点抓取。主要是抓取一些文档型网站 目前是抓取的http://w3school.com.cn/ 抓取了6688个页面 用时大约140s 起初是因为chm版的太老了好多东西没有及时更新,所以就写了这个小程序来获取最新的版本
需要依赖的 npm iconv-lite
node grabWeb.js 路径