# mzNodeSpider

**Repository Path**: getsai/mzNodeSpider

## Basic Information

- **Project Name**: mzNodeSpider
- **Description**: nodejs版麦子学院课程爬取及下载
- **Primary Language**: JavaScript
- **License**: Not specified
- **Default Branch**: master
- **Homepage**: None
- **GVP Project**: No

## Statistics

- **Stars**: 2
- **Forks**: 1
- **Created**: 2016-08-27
- **Last Updated**: 2020-12-18

## Categories & Tags

**Categories**: Uncategorized

**Tags**: None

## README

# mzNodeSpider
nodejs版麦子学院课程爬取及下载
# 使用 #
1. 在config.js中设置 保持路径 及heanders
2. node mz_node http://www.maiziedu.com/course/836/

# 特点 #
1. 使用vscode es6 练手编写
2. gulp进行编译

# 缺点 #
1. nodejs实现下载慢

# 2016.12.30更新 #
1. 经尝试，将网站更换为移动网站之后可以爬取收费课程，也不需要注册 

# 2017.10.31更新 #
1.  对getCourse.js中课程目录地址解析进行了更新修复
2.  对配置中的headers进行了简化
3.  经过测试速度相对还是比较快的

# 2017.11.3更新 #
1.  增加save_toJSON.js，如果不指定课程地址，将爬取config中lession下所有的文件，并存储至data/data.json
2.  速度还是比较快的，瞬间可以趴下1000多课程