学而时习之，不亦说乎

摘要： 1、查看当前iso的路径 2、创建iso的repo源文件夹路径 3、将iso挂载到该repo源文件夹 4、将其它的repo源移走，只留下iso的repo源 5、设置repo源查找路径 # cd /etc/yum.repos.d/cos76 # touch cos76.repo # vim cos76 阅读全文

摘要： public class interview6 { /** * 用java写一个最长子串，有一个字符串，不定长，比如abcdbafedcabcmonabcd， * 写一个方法要找出给定字符串的最长子串，最长子串是连续的不重复的字符串，返回长度（7） */ @Test public void test 阅读全文

摘要： SET @i=1; SELECT DATE_FORMAT(NOW(),'%Y-%m-%d') AS CUR_DT, DATE_FORMAT(DATE_ADD(DATE('2020-12-01'),INTERVAL @i DAY),'%Y%m%d') ADD_DT; SET @i=@i+1; 阅读全文

摘要： 在使用Spark时经常需要把数据落入HBase中，如果使用普通的Java API，写入会速度很慢。还好Spark提供了Bulk写入方式的接口。那么Bulk写入与普通写入相比有什么优势呢？ BulkLoad不会写WAL，也不会产生flush以及split。 如果我们大量调用PUT接口插入数据，可能会导 阅读全文

摘要： （1）添加pom.xml中的依赖包 注意依赖包必须跟cdh中的组件版本一致。附上cdh3.2.1版的pom.xml内容： <?xml version="1.0" encoding="UTF-8"?> <project xmlns="http://maven.apache.org/POM/4.0.0" 阅读全文

摘要： rdd.foreach { records => val config = HBaseConfiguration.create config.set("hbase.zookeeper.property.clientPort", "2181") config.set("hbase.zookeeper. 阅读全文

摘要： 像map一样的json直接存值： import org.json.JSONObject def main(args: Array[String]): Unit = { val jsonObj :JSONObject= new JSONObject() jsonObj.put("zxtotal", " 阅读全文

摘要： 原因：window本地无法获取hadoop的配置 解决方法： 1）下载一个spark-2.4.6-bin-hadoop2.7压缩包到本地并解压 2）下载一个winutils.exe放到spark-2.4.6-bin-hadoop2.7\bin下 做完以上两步后，重启idea，如果还不成功，再执行下面 阅读全文

摘要： 1. statement（默认模式） 缺点：主从复制有延时，当写操作的SQL里存在函数时，会造成主从复制不一致。 特点： （1）此模式不支持RU,RC隔离级别； （2）binglog日志文件中上一个事物的结束点是下一个事物的开始点； （3）DML，DDL语句都会明文显示； （4）对一些系统函数不能准 阅读全文

摘要： IDEA在Junit测试中使用了Scanner，但是控制台一直转圈，无法输入 解决：在配置文件idea64.exe.vmoptions中添加： -Deditable.java.test.console=true 阅读全文