最近在做一个小程序项目,需要爬取第三方数据,于是开始重捡起来爬虫,其实前端爬虫挺好实现的,但因为现在网页出现了SPA,于是开始疯狂踩坑,聊记此文,以慰诸君。 普通网站爬取数据--cheerio 挺简单的,一个工具包,几行代码就解决了 const $ = require('cheerio') const requestPromise = require('request-promis...
最近在做一个小程序项目,需要爬取第三方数据,于是开始重捡起来爬虫,其实前端爬虫挺好实现的,但因为现在网页出现了SPA,于是开始疯狂踩坑,聊记此文,以慰诸君。 普通网站爬取数据--cheerio 挺简单的,一个工具包,几行代码就解决了 const $ = require('cheerio') const requestPromise = require('request-promis...