随笔分类 -  NodeJS

摘要:项目地址:GitHub 目标网站:西瓜视频项目功能:下载头条号【维辰财经】下的最新20个视频姊妹项目:批量下载美女图集 简介 一般批量爬取视频或者图片的套路是,使用爬虫获得文件链接集合,然后通过 writeFile 等方法逐个保存文件。然而,头条的视频,在需要爬取的 html 文件(服务端渲染输出) 阅读全文
posted @ 2018-09-18 13:50 提佰萬 阅读(3460) 评论(2) 推荐(1)
摘要:GitHub地址 目标网站:妹子图(点进去别忘了回来~~)项目功能:批量下载该网站的相册姊妹项目:批量爬取并下载头条视频 启动项目 命令: 配置文件: 技术点 Axios: 发起 get 请求,获取页面和图片 stream Cheerio: 覆盖了 jQuery dom 部分核心 API,可操作获取 阅读全文
posted @ 2018-09-17 00:28 提佰萬 阅读(2855) 评论(0) 推荐(0)
摘要:设置multipleStatements属性为true 参考项目:Github 阅读全文
posted @ 2017-12-13 12:44 提佰萬 阅读(5047) 评论(0) 推荐(1)
摘要:eventproxy 利用事件机制解耦复杂业务逻辑,移除被广为诟病的深度callback嵌套问题 json-stringify 效果类似于JSON.stringify superagent 轻量级客户端请求库 cheerio 类似于jquery dom mysql mysql驱动器 阅读全文
posted @ 2017-12-13 12:24 提佰萬 阅读(294) 评论(0) 推荐(0)
摘要:今天用NodeJS连接Mysql时遇到点折磨人的问题,记录下解决方法。 NodeJS和Mysql都已经正确安装了,但是NodeJS和Mysql的连接出现问题,查找网上一些解决办法都不能解决问题。报错如下: 经过查找定位,在mysql官网找到了解决方案: 官网链接 》》MySQL Connector/ 阅读全文
posted @ 2017-12-10 22:07 提佰萬 阅读(4542) 评论(0) 推荐(0)