01 2023 档案

scala+spark把某列string类型转换dataFrame的日期，array<double>,array<string>格式
摘要：result = resdf.withColumn("Date", to_date(col("Date"), "yyyy-MM-dd")).\ withColumn("arrayDouble", regexp_replace(col("arrayDouble"), "\\]", "")).\ wit 阅读全文
posted @ 2023-01-29 15:14 ivyJ 阅读(356) 评论(0) 推荐(0)
Data Processing code sample :
摘要：Data Processing code sample : Scala : https://github.com/awslabs/deequ python : https://github.com/awslabs/python-deequ 阅读全文
posted @ 2023-01-28 18:18 ivyJ 阅读(52) 评论(0) 推荐(0)
在IDE代码里写死加入keyStore
摘要：System.setProperty("javax.net.ssl.keyStore", "C:\\swdtools\\jdk-11.0.11-X64\\lib\\security\\keystore.jks");System.setProperty("javax.net.ssl.trustStro 阅读全文
posted @ 2023-01-28 18:08 ivyJ 阅读(45) 评论(0) 推荐(0)
开启SSL 证书的debug 可以查看http请求的时候加载了哪些证书
摘要：IDE vm加参数： -Djavax.net.debug=ssl:handshake:verbose:keymanager:trustmanager-Djava.security.debug=access:stack 阅读全文
posted @ 2023-01-28 18:04 ivyJ 阅读(130) 评论(0) 推荐(0)
IDE中自带的java springboot项目的密码加密和解密
摘要：IDE里搜这个类org.jasypt.intf.cli.JasyptPBEStringEncryptionCLI，跑类的main方法进行加密 参数： input=你的明文密码 password=固定你自己公司的某个固定值 algorithm=PBEWithHmacSHA512AndAES_128（加 阅读全文
posted @ 2023-01-28 18:03 ivyJ 阅读(383) 评论(0) 推荐(0)
RestTemplate去掉https验证
摘要：/*@Beanpublic RestTemplate restTemplate() throws KeyStoreException, NoSuchAlgorithmException, KeyManagementException { TrustStrategy acceptingTrustStr 阅读全文
posted @ 2023-01-18 16:49 ivyJ 阅读(213) 评论(0) 推荐(0)