会员
众包
新闻
博问
闪存
赞助商
HarmonyOS
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
六月飞雪
博客园
首页
新随笔
联系
订阅
管理
上一页
1
2
3
4
5
6
···
11
下一页
2017年10月2日
centos7.x86_64搭建饥荒服务器
摘要: http://blog.ttionya.com/article 1233.html 在centos7下找不到 libcurl gnutls.so.4,而且必须要安装32位的才行 然后运行时,会因为 这个文件报段错误导致崩溃。 可以把这个文件删掉,也可以把 复制过来,不过最终还是报错(会被忽略);
阅读全文
posted @ 2017-10-02 14:59 -六月飞雪-
阅读(5696)
评论(0)
推荐(0)
2017年9月18日
利用hive源码解析sql查了哪些表哪些字段
摘要: 在hiveserver2中使用了 对抽象语法树(AST)进行语义分析,分析的过程可以得出hive查询的表及其字段 于是我利用相关的类去做测试: 最后可以根据columnAccessInfo去得到查询的表及其字段。 但这么做不太满足我们的需求,比如说下面这句sql,我想要的结果是查询了test.tes
阅读全文
posted @ 2017-09-18 15:32 -六月飞雪-
阅读(930)
评论(0)
推荐(0)
2017年9月15日
Hive-jdbc获取sessionId
摘要: 在HiveStatement中有一个sessHandle: TSessionHandle有个getSessionId方法可以获取到sessionId THandleIdentifier类有guid和secret 但是guid是个ByteBuffer,不知道怎么反序列化成字符串 后来我看了hivese
阅读全文
posted @ 2017-09-15 20:47 -六月飞雪-
阅读(1520)
评论(0)
推荐(0)
2017年9月12日
root用户无法切换到cdh的hive账号上
摘要: 在/etc/passwd中看到hive账号是登录的终端是/bin/false,而正常的用户配置的都是/bin/bash,因此在root账号su到hive也是没有用的 在su时指定登录的终端为/bin/bash即可登录上去
阅读全文
posted @ 2017-09-12 19:00 -六月飞雪-
阅读(980)
评论(0)
推荐(0)
2017年9月8日
对jvm进行gc的时间、数量、jvm停顿时间的监控
摘要: 在jdk中一个类可以获得gc的信息: 在hadoop common.jar中,有个JvmPauseMonitor$Monitor类,它能监控jvm暂停时间:
阅读全文
posted @ 2017-09-08 11:11 -六月飞雪-
阅读(4808)
评论(0)
推荐(0)
2017年8月6日
安装spark问题汇总
摘要: 使用的版本是 运行spark shell报错 运行spark sql报错找不到org.datanucleus.api.jdo.JDOPersistenceManagerFactory 把$HIVE_HOME/lib/datanucleus .jar复制到$SPARK_HOME/lib目录下 运行sp
阅读全文
posted @ 2017-08-06 13:11 -六月飞雪-
阅读(482)
评论(0)
推荐(0)
2017年7月26日
linux在终端输入中文乱码
摘要: ``` export LANG=en_US.UTF-8 ```
阅读全文
posted @ 2017-07-26 18:04 -六月飞雪-
阅读(441)
评论(0)
推荐(0)
2017年7月25日
hbase报错Could not initialize class org.apache.hadoop.hbase.protobuf.ProtobufUtil
摘要: 上网找了说有两种情况 1. 缺少protobuf java 2.5.0的jar包 2. 多个protobuf jar包互相冲突 我出现这个问题的时候,protobuf没有冲突,而且是2.5.0版本的。后来debug半天才发现在项目中hbase site.xml中hbase.rootdir配置项写错成
阅读全文
posted @ 2017-07-25 16:19 -六月飞雪-
阅读(14223)
评论(0)
推荐(0)
2017年6月19日
gpdb删除segment上残余的session和sql
摘要: 转载请注明出处: "gpdb删除segment上残余的session和sql" 最近公司的gpdb的变卡,导致线上系统查询队列阻塞,用户一点数据都查不出来。 每天早上我和同事都得用我们自家做的gpdb运维平台去杀掉生产的sql,让消费sql能跑起来 但每天这么杀sql也不是事,而且平常生产sql是执
阅读全文
posted @ 2017-06-19 20:44 -六月飞雪-
阅读(392)
评论(0)
推荐(0)
2017年6月7日
vmware启动虚拟机报错VMware Workstation has paused this virtual machine because the disk on which the virtual machine is stored is almost full. To continue, free an additional 1.4 GB of disk space.
摘要: 报错VMware Workstation has paused this virtual machine because the disk on which the virtual machine is stored is almost full. To continue, free an addi
阅读全文
posted @ 2017-06-07 23:06 -六月飞雪-
阅读(2152)
评论(1)
推荐(0)
上一页
1
2
3
4
5
6
···
11
下一页
公告