摘要: 首先申明以下命令是针对mongo 3.4.3版本的,对于高版本的未必可执行,谨供参考! mongo命令端登陆: 1、不需要auth认证登陆 $mongoDB_hone/bin/mongo 10.43.1.9:6330 2、需要auth认证【带有用户名和密码】 $mongoDB_hone/mongo 阅读全文
posted @ 2020-07-31 17:58 小戈戈不怕黑 阅读(411) 评论(0) 推荐(0) 编辑
摘要: 最近公司部分业务数据【txti日志】上报服务终止,但基于该部分数据的报表还需要继续统计,所以调整业务代码为直接读取mongoDB进行统计计算,也对mongoDB命令做了一些调研,下面记录个人的一些小成果,已备日后参考: import com.mongodb.spark.MongoSpark impo 阅读全文
posted @ 2020-07-31 16:42 小戈戈不怕黑 阅读(615) 评论(0) 推荐(0) 编辑
摘要: 公司测试集群迁往腾讯云,安装完flume和kafka后使用api消费topic,在应用日志中打印出来的日志中文部分全部是???????,数据存储写入mysql数据库后中文也是乱码,针对这个问题进行调整修复: 1、kafka消费的格式问题 设置kafka序列化和反序列化格式 properties.pu 阅读全文
posted @ 2020-07-31 15:56 小戈戈不怕黑 阅读(5467) 评论(0) 推荐(0) 编辑