摘要：
1.堆栈大小2.JVM重用3.GC 阅读全文
posted @ 2017-10-17 23:25
信方
阅读(170)
评论(0)
推荐(0)
摘要：
hadoop的运行环境---hadoop/jvm/os/hw原则1：主节点的可靠性要好于从节点：NameNode（Yarn-ResourceManager）、DataNode（NodeManager）可靠性要好于其他节点原则2：多路多核、高频率CPU、大内存的服务器---NameNode的内存决定了... 阅读全文
posted @ 2017-10-17 23:25
信方
阅读(172)
评论(0)
推荐(0)
摘要：
1.避免使用swap分区---将hadoop守护进程的数据交换到磁盘的行为可能会导致操作超时：物理内存（交换）--Swap分区2.调整内存分配策略---操作系统内核根据vm.overcommit_memory（0-表示是否可用的内存，1-表示分配所有的物理内存，2-表示分配所有的物理内存和交换空间的... 阅读全文
posted @ 2017-10-17 23:25
信方
阅读(250)
评论(0)
推荐(0)
摘要：
Beeline和其他工具有一些不同，执行查询都是正常的SQL输入，但是如果是一些管理的命令，比如进行连接，中断，退出，执行Beeline命令需要带上“！”，不需要终止符。常用命令介绍：1、!connect url –连接不同的Hive2服务器2、!exit –退出shell3、!help –显示全部... 阅读全文
posted @ 2017-10-17 23:25
信方
阅读(41198)
评论(0)
推荐(0)
摘要：
1.hive支持四种数据模型• external table ---外部表：Hive中的外部表和表很类似，但是其数据不是放在自己表所属的目录中，而是存放到别处，这样的好处是如果你要删除这个外部表，该外部表所指向的数据是不会被删除的，它只会删除外部表对应的元数据；而如果你要删除表，该表对应的所有数据包... 阅读全文
posted @ 2017-10-17 23:25
信方
阅读(2126)
评论(0)
推荐(0)
摘要：
在使用Hive的元数据配置权限之前必须现在hive-site.xml中配置两个参数，配置参数如下： hive.security.authorization.enabled true hive.security.authorization.createtable.owner.grants ALL h... 阅读全文
posted @ 2017-10-17 23:25
信方
阅读(2373)
评论(0)
推荐(0)
摘要：
1.Hive是什么？ Hive 是基于 Hadoop 的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供完整的 SQL 查询功能，将类 SQL 语句转换为 MapReduce 任务执行。2.Hive数据结构-HDFS-Table-Partiton-BucketTable：每个表... 阅读全文
posted @ 2017-10-17 23:25
信方
阅读(873)
评论(0)
推荐(0)
摘要：
1.计算机管理下用户组下新建用户2.系统属性下远程控制加入用户，设置允许运行任何远程桌面3.运行->gpedit.msc->计算机配置->管理模板->windows 组件->远程桌面服务->远程桌面会话主机->连接->打开限制连接的数量->勾选已启用->修改允许的 RD 最大连接数为1000->应用... 阅读全文
posted @ 2017-10-17 23:25
信方
阅读(317)
评论(0)
推荐(0)
摘要：
Hive可以运行保存在文件里面的一条或多条的语句，只要用-f参数，一般情况下，保存这些Hive查询语句的文件通常用.q或者.hql后缀名，但是这不是必须的，你也可以保存你想要的后缀名。假设test文件里面有一下的Hive查询语句：use siat;select * from test limit 1... 阅读全文
posted @ 2017-10-17 23:25
信方
阅读(768)
评论(0)
推荐(0)
摘要：
1.Linux2.ORACLE/MySQL/SQLSERVER3.NOSQL4.环境部署、用户及权限管理、表空间、表、视图、索引、过程、触发器、分区、函数、查询、性能调优、迁移备份、集群、日志分析、体系结构、锁、4大特性等5.windows server6.shell 阅读全文
posted @ 2017-10-17 23:25
信方
阅读(226)
评论(0)
推荐(0)
浙公网安备 33010602011771号