余腾靖

未归档

/ 注册

全部文章 / 未归档（共2篇）

使用 nodejs 写爬虫(一): 常用模块和 js 语法

常用模块常用模块有以下几个: fs-extra superagent cheerio log4js sequelize chalk puppeteer fs-extra 使用 async/await 的前提是必须将接口封装成 promise, 看一个简单的...

Node.js

2019-04-03

0 824

使用 nodejs 写爬虫(二): 抓取 github 热门项目

其实爬虫是一个对计算机综合能力要求比较高的技术活。首先是要对网络协议尤其是 http 协议有基本的了解, 能够分析网站的数据请求响应。学会使用一些工具，简单的情况使用 chrome devtools 的 network 面板就够了。我一般还会配合 postman 或者 charles 来分析，更...

Node.js

2019-04-05

0 628