摘要: Flink 1.13.1使用log4j.properties定义了jobmanager、taskmanager等的日志输出: # Allows this configuration to be modified at runtime. The file will be checked every 3 阅读全文
posted @ 2021-09-21 10:11 静若清池 阅读(111) 评论(0) 推荐(0) 编辑
摘要: 之前使用Flink 1.11.1时,log4j.properties的配置如下: # This affects logging for both user code and Flink rootLogger.level = INFO rootLogger.appenderRef.file.ref = 阅读全文
posted @ 2021-09-20 19:59 静若清池 阅读(188) 评论(0) 推荐(0) 编辑
摘要: 2021年8月23日,Nebula 发布了最新版本:2.5.0,正好赶上新环境部署,记录一下安装过程及遇到的坑: 一、准备工作 以下安装使用nebula用户,搭建集群模式,一共三台机器:192.168.0.1、192.168.0.2、192.168.0.3 1.1 安装目录 nebula主程序、ne 阅读全文
posted @ 2021-08-25 09:22 静若清池 阅读(388) 评论(1) 推荐(1) 编辑
摘要: 一、需求背景 从Nebula的Github上可以发现,Nebula为以下语言提供了客户端SDK: nebula-cpp nebula-java nebula-go nebula-python nebula-node nebula-rust 我们公司的业务开发语言是C#,但Nebula却没有提供C#版 阅读全文
posted @ 2021-07-19 15:07 静若清池 阅读(384) 评论(1) 推荐(2) 编辑
摘要: Flink是目前流计算的隐形王者,在国际国内有庞大的拥趸。 Nebula是国产图数据库的后起之秀,在DBEngines中排名也逐年上升。 将两者进行结合,可以产生很多应用场景:比如实时计算服务链路调用关系并将结果存到Nebula中、实时计算业务访问风控情况并将结果存到Nebula中、实时计算预警发生 阅读全文
posted @ 2021-07-03 15:46 静若清池 阅读(223) 评论(0) 推荐(0) 编辑
摘要: 一、单元测试 通过Nebula提供的Java Client完成代码开发后,使用JUnit对其进行单元测试,需要注意几点: 1.1 坑 1.Nebula创建图空间是异步实现的,Nebula将在下一个心跳周期内(默认是10s)完成图空间的创建 如果单元测试代码中有动态创建、删除图空间的语句,单元测试结果 阅读全文
posted @ 2021-07-02 23:27 静若清池 阅读(581) 评论(0) 推荐(0) 编辑
摘要: Flink以Standalone模式运行时,可能会发生jobmanager(以下简称jm)或taskmanager(以下简称tm)异常退出的情况,我们可以使用Linux自带的Systemd方式管理jm以及tm的启停,并在jm或tm出现故障时,及时将jm以及tm拉起来。 Flink在1.11版本后,从 阅读全文
posted @ 2021-05-04 17:09 静若清池 阅读(465) 评论(0) 推荐(0) 编辑
摘要: 在使用手机APP的过程中,用户信息会不知不觉的被APP悄无声息的收集到云端,然后进行各种用户行为分析以及智能推荐,这是众所周知但秘而不宣的事。 在使用开源软件时,也存在悄悄收集用户使用信息,并且上报到云端的行为,并且配置是默认打开的,有的配置项名字还比较绕,乍一看以为是关闭的。 开源事好,但收集信息 阅读全文
posted @ 2021-04-04 12:10 静若清池 阅读(179) 评论(0) 推荐(1) 编辑
摘要: 一、问题背景 生产环境Windows机器上用的Zookeeper 3.4.6,最近经常报如下异常: 经过搜索,看到一篇帖子可以解决:https://www.jianshu.com/p/73eec030db86 但需要通过编译Zookeeper源代码的方式进行解决,于是有了本文的一番操作 二、编译过程 阅读全文
posted @ 2020-03-22 22:03 静若清池 阅读(1254) 评论(0) 推荐(2) 编辑
摘要: 自然语言处理是机器学习的一个重要分支,在智能翻译、智能问答、舆情监控、ChatOps等都有很好的应用场景,目前比较好的一个开源实现工具是何晗大神的HanLP,主页(http://hanlp.com/),GitHub项目(https://github.com/hankcs/HanLP),何大神还出了一 阅读全文
posted @ 2020-02-16 17:05 静若清池 阅读(497) 评论(0) 推荐(0) 编辑