牵牛花

摘要： Hive从0.14版本开始支持事务和行级更新，但缺省是不支持的，需要一些附加的配置。要想支持行级insert、update、delete，需要配置Hive支持事务。 一、Hive具有ACID语义事务的使用场景1. 流式接收数据。许多用户使用诸如Apache Flume、Apache Storm或Ap 阅读全文

摘要： redis主要存储类型最常用的五种数据类型： String Hash List Set Sorted set redis存储对象序列化和反序列化 首先来了解一下为什么要实现序列化 为什么要实现序列化接口 当一个类实现了Serializable接口(该接口仅为标记接口,不包含任何方法定义),表示该类可 阅读全文

摘要： EXPORT TABLE stu_p TO '/stu_p.dat'; 将数据和元数据导出到hdfs hdfs dfs -ls /stu_p.dat/year=2012 导入表(必须明白导出表,导出表是将表的元数据,数据导出到hdfs上.)讲一个导出的表导入到数据库中,这个hdfs_path 是一个导出表的文件夹 import table tbname from ‘hdfs_path’ 6、导... 阅读全文

摘要： hive2.1.1配置 首先在conf下复制hive-site.xml 配置文件干掉之前的不然会遇到 Exception in thread "main" java.lang.IllegalArgumentException: java.net.URISyntaxException: Relativ 阅读全文

摘要： maven-assembly-plugin jar-with-dependencies ... 阅读全文

摘要： 原因是zookeeper没有启动 阅读全文

摘要： 幸福课 | 恶习为什么难戒？因为你在HALT状态 幸福课 | 恶习为什么难戒？因为你在HALT状态 文 游识猷 饥饿（hungry）、生气（angry）、孤单（lonely）、疲惫（tired）这4种状态，被称为HALT——这个词刚好是英文里“停止”的意思。研究发现，当我们处在HALT状态时，脑子里 阅读全文

摘要： def main(args: Array[String]): Unit = {//1 read for( i<- Source.fromFile("test.dat").getLines().toArray){ println(i) } // 2 read println(Source.fromFile("test.dat").mkString) //1w... 阅读全文

摘要： 用xshell上传的时候一般直接拖就可以了,命令是put,很少用下载,今天用下载却不行, 我遇到的问题是直接输入命令lcd d:/然后get /root/test.txt是报错sftp: cannot open d: to write! 解决办法是执行lcd 不加路径,然后会弹出一个窗口让你选存储路 阅读全文

摘要： 执行时报错,后来发现他的配置文件中写了相对路径!!所以必须在他的根目录下执行,命令为 nohup bin/azkaban-web-start.sh 1>/tmp/azstd.out 2>/tmp/azerr.out & 坑2: azkaban 将脚本和job放在一个文件执行时会报错,同样的脚本,在L 阅读全文