01 2015 档案

解决Spark用Maven编译时报Exception in thread "main" java.lang.OutOfMemoryError: PermGen space异常
摘要：异常截图： 解决方法： export MAVEN_OPTS="-Xmx2g -XX:MaxPermSize=512M -XX:ReservedCodeCacheSize=512m" 阅读全文
posted @ 2015-01-23 16:22 竹 影 清 风 阅读(6208) 评论(1) 推荐(0)
解决com.mysql.jdbc.exceptions.jdbc4.MySQLSyntaxErrorException: Specified key was too long; max key length is 767 bytes异常
摘要：错误截图: 解决方法： 用root进入mysql终端，执行以下命令： alter database hive character set latin1; 阅读全文
posted @ 2015-01-19 13:06 竹 影 清 风 阅读(1583) 评论(0) 推荐(0)
深入理解MR1与MR2的执行流程
摘要：摘自:Tom White ,《Hadoop.The.Definitive.Guide.3rd.Edition》 MR1 MR2 阅读全文
posted @ 2015-01-14 17:05 竹 影 清 风 阅读(797) 评论(0) 推荐(0)
Ambari自动化卸载shell脚本
摘要：#!/bin/bash # Program: # uninstall ambari automatic # History: # 2014/01/13 - Ivan - 2862099249@qq.com - First release PATH=/bin:/sbin:/usr/bin:/usr/sbin:/usr/local/bin:/usr/lo... 阅读全文
posted @ 2015-01-13 17:48 竹 影 清 风 阅读(7215) 评论(0) 推荐(2)
shell script语法高亮和自动缩进的配置
摘要：编辑/etc/profile文件，在文件末尾加一下内容：export TERM=xterm-color接着让其变为全局变量source /etc/profile 编辑/etc/vimrc文件，在文件末尾添加以下内容： 66 syntax on 67 set tabstop=4 68 set sof... 阅读全文
posted @ 2015-01-13 12:57 竹 影 清 风 阅读(935) 评论(0) 推荐(1)
计算每行所占字符个数，并格式化输出
摘要：import scala.io.Source def widthOfLength(s: String) = s.length.toString.length//计算字符串长度的位数，比如长度为：136，则位数为：3（三位数） if (args.length > 0) { val lines = Source.fromFile(args(0)).getLines.toList va... 阅读全文
posted @ 2015-01-04 17:18 竹 影 清 风 阅读(372) 评论(0) 推荐(0)
Scala的两种变量
摘要：Scala有两种变量，val和var。val类似于Java的final变量，一旦初始化了，就不能再赋值了。var如同Java中的非final变量，可以在生命周期内被多次赋值。 阅读全文
posted @ 2015-01-04 15:47 竹 影 清 风 阅读(628) 评论(0) 推荐(0)