摘要: 1.“-e”不进入hive的交互窗口执行sql语句$ bin/hive -e "select id from student;"2.“-f”执行脚本中sql语句 (1)在/opt/module/datas目录下创建hivef.sql文件[hadoop@master datas]$ touch hiv 阅读全文
posted @ 2019-11-26 21:35 大数据-云计算 阅读(132) 评论(0) 推荐(0)
摘要: 1. Hive命令行模式 进入Hive安装目录,输入bin/hive的执行程序,或者输入hive –-service cli用于linux平台命令行查询,查询语句基本跟mysql查询语句类似。 2. Hive Web界面的启动方式 bin/hive –-service hwi & (&表示后台运行) 阅读全文
posted @ 2019-11-26 21:33 大数据-云计算 阅读(1481) 评论(0) 推荐(0)
摘要: 3.1.1 写入方式 producer采用推(push)模式将消息发布到broker,每条消息都被追加(append)到分区(patition)中,属于顺序写磁盘(顺序写磁盘效率比随机写内存要高,保障kafka吞吐率)。 3.1.2 分区(Partition) 消息发送时都被发送到一个topic,其 阅读全文
posted @ 2019-11-26 15:46 大数据-云计算 阅读(100) 评论(0) 推荐(0)
摘要: 查看当前服务器中的所有topic [hadoop@masterkafka]$ bin/kafka-topics.sh --list --zookeeper master:2181 2)创建topic [hadoop@masterkafka]$ ./kafka-topics.sh --create – 阅读全文
posted @ 2019-11-26 15:44 大数据-云计算 阅读(60) 评论(0) 推荐(0)
摘要: 1)解压安装包 [hadoop@mastersoftware]$ tar -zxvf kafka_2.11-0.11.0.0.tgz -C /opt/module/ 2)修改解压后的文件名称 [hadoop@mastermodule]$ mv kafka_2.11-0.11.0.0/ kafka 3 阅读全文
posted @ 2019-11-26 15:43 大数据-云计算 阅读(69) 评论(0) 推荐(0)