上一页 1 ··· 24 25 26 27 28 29 30 31 32 ··· 40 下一页
摘要: 一、查看HQL执行计划explain1、explainhive在执行的时候会把所对应的SQL语句都会转换成mapreduce代码执行,但是具体的MR执行信息我们怎样才能看出来呢?这里就用到了explain的关键字,他可详细的表示出在执行所对应的语句所对应的MR代码。语法格式如下。extended关键字可以更加详细的列举出代码的执行过程。Hive提供了一个EXPLAIN显示查询执行计划的命令。该语句... 阅读全文
posted @ 2019-04-28 16:22 米兰的小铁將 阅读(419) 评论(0) 推荐(0)
摘要: 一、Fetch Task在执行hive代码的时候,一条简单的命令大部分都会转换成为mr代码在后台执行,但是有时候我们仅仅只是想获取一部分数据而已,仅仅是获取数据,还需要转化成为mr去执行吗?那个也太浪费时间和内存啦,所以有一个hive的配置如下所示:#在hive-default.xml.template默认配置中可知:SELECT STAR, FILTER on partition columns... 阅读全文
posted @ 2019-04-28 15:03 米兰的小铁將 阅读(172) 评论(0) 推荐(0)
摘要: 一、file formatORCFile在HDP 2:更好的压缩,更好的性能:https://zh.hortonworks.com/blog/orcfile-in-hdp-2-better-compression-better-performance/官方ORCfile介绍:https://cwiki.apache.org/confluence/display/Hive/LanguageManua... 阅读全文
posted @ 2019-04-26 14:21 米兰的小铁將 阅读(271) 评论(0) 推荐(0)
摘要: 1、首先对虚拟机进行编辑设置 硬盘大小进行修改到80G;2、在Linux系统中查看磁盘大小此时并没有什么变化;3、上面没有变化的原因,是因为需要重新扫描存储设备的scsi总线;找到scsi磁盘编号,进行rescan:[root@slave1 ~]# ls /sys/class/scsi_disk/0:0:0:0[root@slave1 ~]# echo 1 >/sys/class/scsi_dis... 阅读全文
posted @ 2019-04-26 11:02 米兰的小铁將 阅读(771) 评论(0) 推荐(0)
摘要: 一、label标签 <label> 标签为 input 元素定义标签(label)。 label 元素不会向用户呈现任何特殊的样式。不过,它为鼠标用户改善了可用性,因为如果用户点击 label 元素内的文本,则会切换到控件本身。 <label> 标签的 for 属性应该等于相关元素的 id 元素,以 阅读全文
posted @ 2019-04-26 00:33 米兰的小铁將 阅读(452) 评论(0) 推荐(0)
摘要: 一、数据压缩1、数据压缩 数据量小 *本地磁盘,IO *减少网络IOHadoop作业通常是IO绑定的;压缩减少了跨网络传输的数据的大小;通过简单地启用压缩,可以提高总体作业性能;要压缩的数据必须支持可分割性;2、什么时候压缩?1、Use Compressed Map Input· Mapreduce jobs read input from HDFS· Compress if i... 阅读全文
posted @ 2019-04-25 15:47 米兰的小铁將 阅读(496) 评论(0) 推荐(0)
摘要: 一、image #img标签包在a标签中可以加超链接#src="1.jpg":图片的路径#title="茶杯":当鼠标放在图片上时,显示的内容#style="height: 200px"; width="240px;" :指定图片的大小#alt="茶":当图片不存在时,显示的内容 二、列表1、ul标签#ul标签要与li标签一起用 a b ... 阅读全文
posted @ 2019-04-25 00:41 米兰的小铁將 阅读(379) 评论(0) 推荐(0)
摘要: 一、超链接某度#target="_blank" :打开新的web页面二、锚第一章 第二章 第三章 第四章 第一章的内容 第二章的内容 第三章的内容 第四章的内容#id是唯一的;#在a标签中写上某标签的id,就会跳转过去; 阅读全文
posted @ 2019-04-25 00:01 米兰的小铁將 阅读(235) 评论(0) 推荐(0)
摘要: 一、多行文本默认值二、下拉框1、单选2、多选 阅读全文
posted @ 2019-04-24 23:39 米兰的小铁將 阅读(274) 评论(0) 推荐(0)
摘要: https://cwiki.apache.org/confluence/display/Hive/HiveServer2+Clients一、HiveServer2、Beeline 1、HiveServer2HiveServer2是作为hive的一个服务启动的;#启动,也可以让它在后台启动[root@hadoop-senior hive-0.13.1]# bin/hiveserver22、beeli... 阅读全文
posted @ 2019-04-24 17:03 米兰的小铁將 阅读(1378) 评论(0) 推荐(0)
上一页 1 ··· 24 25 26 27 28 29 30 31 32 ··· 40 下一页