biu嘟

摘要： 一.查询分类 1.基本查询： 使用elasticsearch内置查询条件进行查询。 2.组合查询： 把多个查询组合在一起进行复合查询。 3.过滤： 查询同时，通过filter条件在不影响打分的情况下筛选数据。 二.设置索引和映射 1.建立lagou索引: 2.插入数据： 3.elasticsearc 阅读全文

摘要： 一.简介： 映射：在创建索引时，可以预先定义字段的类型（映射类型，也就是type，一个索引可以有一个或多个类型）及相关属性。 Elasticsearch会根据JSON源数据的基础类型猜测你想要的字段映射。将输入的数据转变成可搜索的索引项。Mapping就是我们定义的字段的数据类型，同时告诉Elast 阅读全文

摘要： 一·_mget: 1.创建的索引如下： 2.批量查询： 二.bulk批量操作： 增删改查：把所有操作发送到一个节点解析，在由节点分发，数据量一次也不能提交太多 阅读全文

摘要： 1.初始化索引： 运行后返回： 访问elasticsearch-head: 刷新出现lagou 查看索引信息 2.查看索引设置信息： 执行效果 执行效果 3.更新索引信息： 执行后 执行后 4.保存文档： 执行后 head中可查看 执行后 查询 5.获取某条完整数据： 执行后 6.获取部分字段： 执 阅读全文

摘要： 一.概念 集群：一个或者多个节点组织在一起 节点：一个节点是集群中的一个服务器，由一个名字来标识，默认是一个随机的漫威角色名字。 分片：将索引划分为多份的能力，允许水平分割和扩展容量，多个分片相应请求，提高性能和吞吐量。 副本：创建分片的一份或多份的能力，在一个节点失败，其余节点可以顶上。 二.el 阅读全文

摘要： 一.elasticsearch介绍 1.简介（使用的是nosql，更新比mongodb慢）： ElasticSearch是一个基于Lucene的搜索服务器。它提供了一个分布式多用户能力的全文搜索引擎，基于RESTful web接口。Elasticsearch是用Java开发的，并作为Apache许可 阅读全文

摘要： 合作者：201631062222，201631062232 代码地址:https://gitee.com/biubiubiuLYQ/ceshi_secend 本次作业链接地址：https://edu.cnblogs.com/campus/xnsy/2018softwaretest2398/homew 阅读全文

摘要： 一.分布式爬虫简介 1.介绍： 分布式爬虫就是多台计算机上都安装爬虫程序，重点是联合采集。比如爬虫A，B，C分别在三台服务器上，需要一个状态管理器集中分配，去重这三个爬虫的url，状态管理器也是一个服务，需要部署在某一个服务器上。 2.优点： （1）充分利用多机器的带宽加速爬取； （2）充分利用多机 阅读全文

摘要： 一.scrapy暂停与重启 1.要暂停，就要保留一些中间信息，以便重启读取中间信息并从当前位置继续爬取，则需要一个目录存放中间信息： scrapy crawl spider_name -s JOBDIR=dir/001——spider_name是你要爬取得spider的py文件名，JOBDIR是命令 阅读全文

摘要： 一.在开发某运动app时，遇见以下情况 1.部分表内容如下： 2.序列化想实现的功能： 在序列化Schedule表时，sport是一个外键字段，想筛选sport的外键school是当前已登录的用户的school字段下的该学校所有运动项目（即筛选为queryset=Sports.objects.fil 阅读全文