摘要:本人将博客园搬家至CSDN 阅读全文
posted @ 2020-11-17 17:22 七寸青衫 阅读(10) 评论(0) 推荐(0) 编辑
摘要:背景: Sparkstreaming计算完成的数据封装成对象后需要转换成json并输出到Redis 问题: 1、scala对象无法序列化 2、sclaa对象序列化后为空 解决方案: 1、样例类必须加上注解@BeanProperty,这样scala的类中的属性就有了get,set方法 case cla 阅读全文
posted @ 2020-11-15 22:04 七寸青衫 阅读(21) 评论(0) 推荐(0) 编辑
摘要:文件需要放在resource下,打成jar包后仍然可以读取到1. 各种环境都能读取。(通用) ClassPathResource classPathResource = new ClassPathResource("word.txt");InputStream inputStream =classP 阅读全文
posted @ 2020-11-15 16:23 七寸青衫 阅读(23) 评论(0) 推荐(0) 编辑
摘要:代码如下: //需要传入的某个参数是个数组 val set = new mutable.HashSet[Long]() set.add(40929354653L) set.add(611771548884L) val arr = set.toArray //把参数转换成json格式 val json 阅读全文
posted @ 2020-11-12 16:59 七寸青衫 阅读(9) 评论(0) 推荐(0) 编辑
摘要:字符串: { "currentTime":1604475400444, "dayString":"2020-11-04", "hmString":"16:31", "hmsString":"16:31:56", "itemAveragePrice":23.582698961937723, "item 阅读全文
posted @ 2020-11-04 16:47 七寸青衫 阅读(21) 评论(0) 推荐(0) 编辑
摘要:问题截图: 解决办法: 1、修改eagle目录 ./bin/ke.sh文件 //注释掉下面的几行内容: # rm -rf $KE_HOME/kms/webapps/ke # rm -rf $KE_HOME/kms/work # mkdir -p $KE_HOME/kms/webapps/ke # c 阅读全文
posted @ 2020-09-30 17:35 七寸青衫 阅读(31) 评论(0) 推荐(0) 编辑
摘要:背景:写了一个python删除mysql表中数据的脚本,在执行的时候提示如下: 安装pymysql:使用pip install 安装 pymysql,提示没有pip 安装pip:依次执行下面命令: wget https://bootstrap.pypa.io/get-pip.py python ge 阅读全文
posted @ 2020-09-25 11:08 七寸青衫 阅读(79) 评论(0) 推荐(0) 编辑
摘要:序: 本文首先介绍DataX使用(编写配置文件的方式)之MongoDB中的数据导出到HDFS上的一些注意事项,datax安装没有什么坑,所以本文不对此进行详细介绍,详细安装过程请自行查看官网。 一、datax的基本使用 1、datax的目录结构 目录说明: backup:本人自己创建的备份目录 ,因 阅读全文
posted @ 2020-09-09 21:27 七寸青衫 阅读(122) 评论(0) 推荐(0) 编辑
摘要:1、每台服务器生成公钥 ssh-keygen -t rsa 2、每台服务器本机输入 cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys 3、公钥复制到目标服务器 scp -P <端口号> ~/.ssh/authorized_keys root@<服务器地址 阅读全文
posted @ 2020-07-30 15:02 七寸青衫 阅读(88) 评论(0) 推荐(0) 编辑
摘要: 阅读全文
posted @ 2020-06-16 21:29 七寸青衫 阅读(54) 评论(0) 推荐(0) 编辑
loading: { rebound: { tension: 16, }, spinner: { id: 'spinner', radius: 90, } }