酱汁怪兽

2021年8月26日

摘要： 1、DML官网：LanguageManual DML - Apache Hive - Apache Software Foundation 2、表创建好了，把txt数据加载导入表中 LOAD DATA [LOCAL] INPATH 'filepath' [OVERWRITE] INTO TABLE 阅读全文

posted @ 2021-08-26 15:38 酱汁怪兽阅读(73) 评论(0) 推荐(0)

Hive DDL之表操作

摘要： 1、官网操作：LanguageManual DDL - Apache Hive - Apache Software Foundation 2、创建表CREATE TABLE table_name CREATE [TEMPORARY] [EXTERNAL] TABLE [IF NOT EXISTS] 阅读全文

posted @ 2021-08-26 13:47 酱汁怪兽阅读(107) 评论(0) 推荐(0)

2021年8月25日

Hive DDL之数据库操作

摘要： 1、Hive DDL （1）Hive Data Definition Language （2）create、delete、alter（更新）...管理相关的 2、Hive 数据抽象 / 结构（1）database 数据库对应HDFS一个目录（2） table 表对应HDFS一个目录（3）阅读全文

posted @ 2021-08-25 17:11 酱汁怪兽阅读(96) 评论(0) 推荐(0)

2021年8月5日

Hive入门+示例

摘要： 0、总结（1）在hive里创建一个数据库：test_db、testzhang_db 通过MySQL查询testzhang_db，是在hadoop_hive（存放元数据信息）》DBS（表）》即数据库的创建信息通过hadoop查询，是值的默认存储路径：hdfs://hadoop000:8020/ 阅读全文

posted @ 2021-08-05 16:51 酱汁怪兽阅读(296) 评论(0) 推荐(0)

2021年7月30日

Hive部署

摘要： 1、下载hive-1.1.0-cdh5.15.1.tar.gz到本地（1）依据hadoop版本5.15.1，从而下载Hive的版本5.15.1 [hadoop@hadoop000 software]$ ls hadoop-2.6.0-cdh5.15.1.tar.gz （2）下载地址：https:/ 阅读全文

posted @ 2021-07-30 16:45 酱汁怪兽阅读(84) 评论(0) 推荐(0)

Hive与RDBMS的区别

摘要： 1、Hive与RDBMS里的SQL没有任何关系，只是长得比较像。 2、支持（1）SQL （2）分布式 3、区别（1）RDBMS的时效性较高（2）Hive要通过sql转换为MapReduce的，然后提交到集群上运行。主要用于离线处理。（3）MySQL的集群是比较小的，构建在专业的机器上，成本高阅读全文

posted @ 2021-07-30 09:21 酱汁怪兽阅读(319) 评论(0) 推荐(0)

2021年7月28日

Hive部署架构（待进一步细化）

摘要： 1、测试环境（1）Derby：Hive里自带引擎存储元数据信息，当三个客户端同时访问Hive时，Derby支持不了。（2）client、hive、mysql、derby 2、生产环境（1）client、hive、mysql、备份mysql （2）hive指向的是一个虚的地址，既不是active 阅读全文

posted @ 2021-07-28 16:49 酱汁怪兽阅读(67) 评论(0) 推荐(0)

Hive体系架构

摘要： 1、Hive体系架构（1）Command-line shell：client在命令行shell上写sql，写完后提交给Hive引擎上。（2）Thrift/JDBC：看做server/jdbc。Thrift是一种协议，把Hive起成一个服务server，通过JDBC的方式提交sql。额外可以看看W 阅读全文

posted @ 2021-07-28 16:28 酱汁怪兽阅读(256) 评论(0) 推荐(0)

数据仓库Hive

摘要： 1、Hive的存在可以简化MapReduce实现过程（1）MapReduce编程的不便（2）传统关系型数据库RDBMS人员的需要（3）HDFS上的文件没有schema的概念：即没有表明、字段名、字段类型等信息。仅仅是一个字符串的文件。 2、Hive是什么？（1）由Facebook开源，用于解阅读全文

posted @ 2021-07-28 15:56 酱汁怪兽阅读(422) 评论(0) 推荐(0)

电商项目实战-打包至服务器上运行（十三）

摘要： 1、更改输入、输出路径（1）输入路径为：args[0] （2）输出路径为：args[1] 2、修改IPParser.java src/main/java/project/utils/IPParser.java 目前本机的IP库是放在ip/qqwry.dat 要修改为： //本机ip库路径 //pr 阅读全文

posted @ 2021-07-28 15:02 酱汁怪兽阅读(77) 评论(0) 推荐(0)

公告