摘要: 对于python多线程爬虫,使用multiprocessing能有效的帮我们实现多线程的任务,如以下代码所示,这段代码看似没有什么毛病,但真正执行起来时,有时程序能正常的退出,但大多数情况下是不能正常的退出,程序一直处于阻塞的状态 def Producer(in_q,url,type): respo 阅读全文
posted @ 2021-10-04 10:55 hello-*-world 阅读(682) 评论(0) 推荐(0)
摘要: Ik分词器能有效的帮助我们对词语进行各种方式的拆分,还可以根据自定义设置完成对词语的拆分,是搜索引擎不可或缺的一部分。接下来就详细的介绍一下Ik分词器的配置过程 1.在github上查看Ik分词器的版本 https://github.com/medcl/elasticsearch-analysis- 阅读全文
posted @ 2021-06-19 20:56 hello-*-world 阅读(321) 评论(0) 推荐(0)
摘要: Elasticsearch是一个基于Lucene的搜索服务器。它提供了一个分布式多用户能力的全文搜索引擎,基于RESTful web接口。Elasticsearch是用Java语言开发的,并作为Apache许可条款下的开放源码发布,是一种流行的企业级搜索引擎。Elasticsearch(一般为集群) 阅读全文
posted @ 2021-06-19 17:05 hello-*-world 阅读(81) 评论(0) 推荐(0)
摘要: 1.拉取镜像(要与Es的版本对应) docker pull kibana:7.13.2 2.运行容器 docker run -d --name kibana -p 5601:5601 kibana:7.13.2 3.查看logs docker logs -f kibana 根据日志可以看到kiban 阅读全文
posted @ 2021-06-19 15:02 hello-*-world 阅读(413) 评论(0) 推荐(0)
摘要: 1.拉取镜像 docker pull mobz/elasticsearch-head:5 2.创建容器及启动 docker create --name elasticsearch-head -p 9100:9100 mobz/elasticsearch-head:5 docker start ela 阅读全文
posted @ 2021-06-19 13:51 hello-*-world 阅读(71) 评论(0) 推荐(0)
摘要: 1.在docker hub中搜索和查看对应的版本 https://hub.docker.com 2.在docker中获取对应的镜像 docker pull elasticsearch:7.13.2 3.运行镜像 docker run --name elasticsearch -d -e ES_JAV 阅读全文
posted @ 2021-06-19 13:28 hello-*-world 阅读(131) 评论(0) 推荐(0)
摘要: 我们通常会遇到修改容器内的配置问题,改的是容易。但改完之后容器起不来了,那就可难受了。当然我们也可以重新构建容器,一切都重新来一遍。但这真的是得不偿失,一个小小的配置,弄这么大的动静。还有一种就是把修改容器的配置,然后重启容器。当然之前的配置导致容器是起不来的,我们没有办法进入到容器中去。所以我们就 阅读全文
posted @ 2021-06-18 10:17 hello-*-world 阅读(1637) 评论(0) 推荐(0)
摘要: 分布式事务解决方案 分布式事务一直是软件开发中老生常谈的问题,去面试的时候,无论是去打螺丝呢还是去造飞机呢,都会问一问分布式事务。对于没有接触过的开发者来说,一听这高级一点的名词就会产生恐惧的心理,感觉其很复杂。其实分布式事务就是解决问题的方案,其实现的方式不唯一,其要解决的问题就是保证数据的最终一 阅读全文
posted @ 2021-06-16 17:31 hello-*-world 阅读(83) 评论(0) 推荐(0)
摘要: 说起调度任务,在.NET中不得不说的就是Quartz.NET了,Quartz.NET是一个强大的、开源的轻量的作业调度框架,是 OpenSymphony 的 Quartz API 的.NET移植,用C#改写。官网地址:https://www.quartz-scheduler.net/ 在日常的开发中 阅读全文
posted @ 2021-02-23 16:33 hello-*-world 阅读(219) 评论(0) 推荐(0)
摘要: 最近做前后端分离项目(.net core web api +vue)时,后台跨控制器不能获取到session。由于配置的是共享的session。本来以为是共享session出了问题,就在共享session这块找了大半天的问题,把相关组件删了一遍,到最后还是不行。最终转换了思路,是不是前后端分离的问题 阅读全文
posted @ 2020-12-28 19:42 hello-*-world 阅读(1242) 评论(0) 推荐(0)