摘要： 把一个数据库备份成SQL脚本文件，该脚本文件可以用gpdbrestore命令来恢复数据库。 摘要gpcrondump -x database_name [-s schema | -t schema.table | -T schema.table] [--table-file=filename | - 阅读全文

摘要： --日期转时间戳 SELECT EXTRACT(epoch FROM NOW()); SELECT EXTRACT(epoch FROM CAST('2017-12-06 00:17:10' AS TIMESTAMP)); --时间戳转日期 SELECT TO_TIMESTAMP(1512490630) 阅读全文

摘要： --解压 --归档 阅读全文

摘要： --一般通过hive -e导出文本时，我都习惯把比较容易出错的String类型字段做一次regexp_replace()处理，因为如果字段里面含有制表符，那是一件很坑很坑的事 --GP中新建外部表，根据之前把\t替换掉的分隔符x01来分隔，屡试不爽，成功率99.99% --即使sed 's/\t/\ 阅读全文

摘要： 本文转自博客：http://www.cnblogs.com/voidy/ SCP(Secure Copy)是一个在各个主机之间进行复制或者文件传输的一个命令行工具。 它使用一种同ssh一样的安全机制。事实上，它在后台使用ssh连接来进行文件的传输。 scp既指一种定义安全复制应该如何工作的协议，也指 阅读全文

摘要： 1.yum方式安装samba服务(实践证明yum方式安装最方便) yum -y install samba 2.养成好的习惯，先把smb.conf备份cp smb.conf smb.conf.bak 3.配置samba服务 vi /etc/samba/smb.conf [share] #共享文件夹名 阅读全文

摘要： 1.查看数据库中大于100MB的表的倾斜情况 (数据倾斜率公式：最大子节点数据量/平均节点数据量。为避免整张表的数据量为空，同时对结果的影响很小，在平均节点数据量基础上加上一个很小的值) 2.队列限制，执行和等待查询的数量： 3.查看role分配的resource queue 4.查询所有的reso 阅读全文

摘要： --1.指定月份总共多少天 --2.修改默认搜索(search_path)路径 --3.更改schema所有者 --4.修改表的所有者 --5.授予指定用户查询或所有权限 --6.授予指定用户schema使用权限 --7.回收指定用户schema使用权限 --不同对象授权关键字 --8.批量授予函数 阅读全文

摘要： hive通过将查询划分成一个或多个MapReduce任务达到并行处理的目的。每个任务都可能具有多个mapper和reducer任务，其中至少有一些是可以并行执行的。 确定最佳的mapper个数和reducer个数取决于多个变量，例如输入的数据量大小以及对这些数据执行的操作类型等。 保持平衡性是很有必 阅读全文

摘要： 大半夜的不由的想说一句：世界上本没有坑,挖的人多了,于是就有了坑。但踩的坑多了,想问题的角度也就改变了，一切都很值。 坑王驾到背景：用Kettle导SQLServer中的十几张表到PostgreSQL，导某个表的时候发现有些字段肉眼看上去是空白的，但死活都导不进去， 用LEN()函数发现竟然有长度， 阅读全文