摘要：
在shell编程中，”EOF“通常与”filename或者cat>filename(catfilename或者cat>filename)其实，第一种形式和第二种形式没有什么本质的区别，第一种形式将内容直接输出到标准输出（屏幕），而第二种形式将标准输出进行重定向，将本应输出到屏幕的内容重定向到文件而... 阅读全文
posted @ 2015-11-09 14:14
PowerBI工坊
阅读(384)
评论(0)
推荐(0)
摘要：
shell脚本操作mysql数据库，使用mysql的-e参数可以执行各种sql的(创建，删除，增，删，改、查)等各种操作mysql -hhostname -Pport -uusername -ppassword -e 相关mysql的sql语句，不用在mysql的提示符下运行mysql，即可以在sh... 阅读全文
posted @ 2015-11-06 21:34
PowerBI工坊
阅读(247)
评论(0)
推荐(0)
摘要：
1. 只支持相等JOIN。 2. 多表连接当使用不同的列进行JOIN时，会产生多个MR作业。 3. 最后的表的数据是从流中读取，而前面的会在内存中缓存，因此最好把最大的表放在最后。 SELECT /*+ STREAMTABLE(a) */ a.val, b.val, c.val FROM a JOI 阅读全文
posted @ 2015-11-06 21:23
PowerBI工坊
阅读(545)
评论(0)
推荐(0)
摘要：
hive.optimize.cp=true：列裁剪hive.optimize.prunner：分区裁剪hive.limit.optimize.enable=true：优化LIMIT n语句hive.limit.row.max.size=1000000：hive.limit.optimize.limi 阅读全文
posted @ 2015-11-06 21:19
PowerBI工坊
阅读(214)
评论(0)
推荐(0)
摘要：
前置条件 已经成功安装配置Hadoop和Mysql数据库服务器，如果将数据导入或从Hbase导出，还应该已经成功安装配置Hbase。 下载sqoop和Mysql的JDBC驱动 sqoop-1.2.0-CDH3B4.tar.gz ：http://archive.cloudera.com/cdh/3/s 阅读全文
posted @ 2015-11-06 15:04
PowerBI工坊
阅读(342)
评论(0)
推荐(0)
摘要：
在实际工作中，需要对shell脚本进行正确性测试。如何用最快最有效的方式进行测试？很多开发的习惯是，二话不说，写完/拿到，就跑一把，看看输入，输出，想要的操作是否完成，也就过了。其实这是十分不严谨的，若是未经过QA，风险还是相当大的。以下即shell脚本测试流程，仅供参考1.代码走读：写完，或者拿到... 阅读全文
posted @ 2015-11-05 16:21
PowerBI工坊
阅读(8741)
评论(0)
推荐(1)
摘要：
linux下重命名文件或文件夹的命令mv既可以重命名，又可以移动文件或文件夹.例子：将目录A重命名为Bmv A B例子：将/a目录移动到/b下，并重命名为cmv /a /b/c其实在文本模式中要重命名文件或目录的话也是很简单的，我们只需要使用mv命令就可以了，比如说我们要将一个名为abc的文件重命名... 阅读全文
posted @ 2015-11-04 18:20
PowerBI工坊
阅读(272)
评论(0)
推荐(0)
摘要：
【`】，学名叫“倒引号”， 如果被“倒引号”括起来， 表示里面需要执行的是命令。比如 `dirname $0`， 就表示需要执行 dirname $0 这个命令【“”】 ， 被双引号括起来的内容， 里面 出现 $ (美元号： 表示取变量名) `（倒引号： 表示执行命令） \（转义号： 表示转义），... 阅读全文
posted @ 2015-11-03 10:48
PowerBI工坊
阅读(296)
评论(0)
推荐(0)
摘要：
在xshell命令行里面输入：locale输出： LANG=zh_CN.UTF-8LC_CTYPE="zh_CN.UTF-8"LC_NUMERIC="zh_CN.UTF-8"LC_TIME="zh_CN.UTF-8"LC_COLLATE="zh_CN.UTF-8"LC_MONETARY="zh_CN... 阅读全文
posted @ 2015-11-02 21:11
PowerBI工坊
阅读(989)
评论(0)
推荐(0)
摘要：
scp 对拷文件夹 和 文件夹下的所有文件 对拷文件并重命名对拷文件夹 (包括文件夹本身)scp -r /home/wwwroot/www/charts/util root@192.168.1.65:/home/wwwroot/limesurvey_back/scp对拷文件夹下所有文件 (不包括文... 阅读全文
posted @ 2015-10-22 09:54
PowerBI工坊
阅读(269)
评论(0)
推荐(0)
浙公网安备 33010602011771号