Kuai Jiajin

摘要： 一、安装Nginx 在 /home/download下下载压缩包 解压缩 添加环境变量： 一些nginx相关命令 修改nginx配置 二、uwsgi安装 先安装uwsgi 在你的项目根目录下创建一个配置文件uwsgiconfig.ini(uwsgi支持多种配置文件格式，xml，ini，json等) 阅读全文

摘要： 一、为什么要设计解析器 我的七月小说网肯定不止爬单个站点的，每新增一个站点或者网页dom发生变化就得修改代码，多累哦。 所以我决定弄个数据解析器。 二、设计思路 下面是一个通用的解析规则对象 1.首先确定解析器待获取的数据的类型和字段； 2.通过目标html dom节点确定select值； 3.根据 阅读全文

摘要： 一、爬虫策略 1.主服务器先根据spider.all set排重，再 lpush request_url 到spider.wait List中，并且 sadd request_url 到 set中； 2.两台从服务器 brpop 出最后一条url 进行解析，再抓取数据； 二、缓存策略 1.主服务器通 阅读全文

摘要： 一、为什么要迁移 我的七月小说站点放在JCloud上，恕我直言，配合我的Aliyun服务器进行数据交互，那是相当的慢，没办法，京东云上面十几块钱的公网ip，也就这样了。 所以我决定把web服务器和数据库部署到一起。 二、迁移前导步骤 迁移过程中顺便记录一手，供后面再次迁移到别的服务器上查阅，省的麻烦 阅读全文

摘要： React客户端调用GraphQL 一、通过Relay框架中的QueryRenderer组件实现数据交互，有2点需要注意一下： 1.query的命名： 注意query前缀保持和js文件名一致，ex： App.js 命名 AppRankTypeQuery 2.schema.graphql文件的编写 通 阅读全文

摘要： 一、实现功能首页各类排行榜加载数据： 向下遍历子节点并展开； 1.展开过程中动态加载简介summary、书类bookType； 2.book对象上包裹Rank节点，描述book对象在不同排行榜下所处位置（sort）; 3.可控制排行榜下的book数目 二、实现首页书类展示： 1.父类及子类展展开； 阅读全文

摘要： 一次查询，搞定需求 举个例子，Book对象有bookTypeId，那我想看对应的bookTypeName，bookType对应的summary咋办？ 如果你用RESTful Api ，免不了要定制接口或者多次调用后端。 现在用上GraphQL,就是这么无情： sql语句？各种定制化接口？不存在的，一 阅读全文

摘要： 通过拼接的TAG_NAME字符串获取对应的TAG_ID字符串 形如： '丹药|练功流|轻松|学生|学院风' 查询结果： '10|35|36|40' 将父类别对应的SUMMARY字段同步到子类别的SUMMARY字段 创建触发器，插入前更新排序值 MariaDB 查询缓存 未完待补充 阅读全文

摘要： 概述 后台数据库几个基本表基本搭建完毕，看了下Github Develop的V4 Api抛弃了RESTful，采用GraphQL，感觉很有意思，一看文档，竟然有Python的开源实现 Graphene ，这就很舒服了。 反正也是学习，搞起来。 Flask + Graphene + SQLAlcham 阅读全文

摘要： 概述 在通过对世面上的各种小说网站简单了解之后（PS：好多盗版网站真的好丑哦。），去除花里胡哨的功能，保留实用功能。 初步制定了以下几个功能需求，当然，所有需求功能都是我自己设计、自己评审，大不了到时候再改嘛。（我这也算是敏捷开发？滑稽。） 一、用户体系 初步设定三类人群 1.游客 不谈了，百分之八 阅读全文