摘要: Python3.5后 Tornado官方建议使用async和await的方式实现异步程序,尝试了下使用Tornado和协程爬取博客园的文章并使用peewee_async异步写入MySQL数据库。 一. 博客园文章抓取测试: 这里我以我自己的一篇文章详情作为测试url,https://www.cnbl 阅读全文
posted @ 2018-11-13 22:56 HarvardFly 阅读(660) 评论(0) 推荐(1) 编辑
摘要: Elasticsearch是一个基于Lucene的搜索服务器,其搜索的核心原理是倒排索引,今天谈下在日常项目中使用它遇到的一些问题及优化解决办法。 一. 搜索的深度分页问题 在日常项目中,经常会有分页搜索并支持跳页的需求,类似百度、Google搜索那样,使用ES进行这类需求的搜索时一般采用from/ 阅读全文
posted @ 2018-11-13 16:45 HarvardFly 阅读(1462) 评论(0) 推荐(2) 编辑