Hive - 如何导出建表语句？

在 Hive 中想要导出（查看或保存）某张表的建表语句，可以通过多种方法实现。下面我分几种常用方式详细说明👇

---

🧩 一、使用命令行查看建表语句（最常用）

✅ 命令：

SHOW CREATE TABLE table_name;

示例：

SHOW CREATE TABLE my_database.my_table;

输出：

Hive 会返回该表的完整建表 SQL，包括：

• 表名

• 字段定义

• 分区信息（若有）

• 存储格式（如 ORC、Parquet、TextFile 等）

• 位置（HDFS 路径）

• TBLPROPERTIES（表属性）

示例输出：

CREATE TABLE `my_database.my_table`(
  `id` string,
  `name` string,
  `age` int)
PARTITIONED BY (`dt` string)
ROW FORMAT DELIMITED
FIELDS TERMINATED BY '\t'
STORED AS TEXTFILE
LOCATION 'hdfs://nameservice1/user/hive/warehouse/my_database.db/my_table'
TBLPROPERTIES (
  'transient_lastDdlTime'='1730530440')

 

---

🧾 二、导出到文件（保存建表语句）

你可以将建表语句重定向到一个文件中：

命令行方式：

hive -e "SHOW CREATE TABLE my_database.my_table;" > create_table.sql

或者使用 Beeline：

beeline -u "jdbc:hive2://localhost:10000" -n hiveuser -p hivepwd -e "SHOW CREATE TABLE my_database.my_table;" > create_table.sql

✅ 导出的文件 create_table.sql 就包含完整的 CREATE TABLE 语句。

---

💡 三、在 Beeline 或 Hive CLI 中复制结果

如果是在 Hive CLI 或 Beeline 中交互执行：

• 执行 SHOW CREATE TABLE xxx;

• 将结果直接复制粘贴即可。

Hive 输出会有换行和缩进，可直接用文本编辑器（如 VS Code、Notepad++）整理格式。

---

🧠 四、获取外部表元数据（通过命令行或 API）

如果你想从元数据库（如 MySQL 中的 Hive Metastore）或使用命令行工具拿到建表信息：

使用 hive --service metatool 或 beeline

也可以查询元数据库表：

SELECT TBL_NAME, TBL_TYPE, VIEW_ORIGINAL_TEXT, VIEW_EXPANDED_TEXT FROM TBLS WHERE TBL_NAME='your_table';

不过这种方式仅限管理员使用，不建议日常用户直接操作元数据库。

---

⚙️ 五、如果要导出多个表的建表语句

可以用简单脚本批量导出，比如：

for t in $(hive -S -e "SHOW TABLES IN my_database;");
do
  echo "Exporting $t ..."
  hive -e "SHOW CREATE TABLE my_database.$t;" > create_${t}.sql
done

 

---

✅ 总结

方式	命令	说明
查看建表语句	SHOW CREATE TABLE table_name;	最常用、最直接
导出建表语句	hive -e "SHOW CREATE TABLE table;" > create.sql	保存为文件
Beeline 导出	beeline -u "jdbc:hive2://..." -e "SHOW CREATE TABLE ...;" > create.sql	适合远程连接
批量导出	Shell 脚本循环执行	导出整个库的表结构

---

是否希望我帮你写一个完整的批量导出 Hive 数据库中所有表的建表语句的 shell 脚本？

 

You said:

好的，谢谢。

 

ChatGPT said:

不客气 😊
那我给你一个可直接运行的 批量导出 Hive 数据库中所有表建表语句 的 Shell 脚本示例👇

---

🧾 Hive 批量导出建表语句脚本

📄 文件名：export_hive_create_tables.sh

#!/bin/bash

# ========== 配置部分 ==========
DB_NAME="your_database"             # 要导出的数据库名
OUTPUT_DIR="./hive_create_sqls"     # 导出目录
HIVE_CMD="hive"                     # 或者 "beeline -u jdbc:hive2://localhost:10000"

# ========== 创建输出目录 ==========
mkdir -p ${OUTPUT_DIR}

echo "开始导出 Hive 数据库 [${DB_NAME}] 的建表语句..."
echo "输出目录: ${OUTPUT_DIR}"
echo "---------------------------------------"

# ========== 获取所有表名并循环导出 ==========
TABLES=$(${HIVE_CMD} -S -e "SHOW TABLES IN ${DB_NAME};")

for t in ${TABLES}
do
    echo "正在导出表: ${t}"
    ${HIVE_CMD} -S -e "SHOW CREATE TABLE ${DB_NAME}.${t};" > ${OUTPUT_DIR}/${DB_NAME}_${t}.sql
done

echo "---------------------------------------"
echo "✅ 所有建表语句已导出完成！"
echo "文件保存路径: ${OUTPUT_DIR}/"

 

---

🧩 使用说明

1. 保存脚本
   将上面的内容保存为：

   export_hive_create_tables.sh

2. 修改参数
   修改脚本前几行的参数：

   DB_NAME="your_database" OUTPUT_DIR="./output_dir"

3. 赋予执行权限

   chmod +x export_hive_create_tables.sh

4. 执行脚本

   ./export_hive_create_tables.sh

5. 查看结果
   输出目录中会生成多个 .sql 文件，例如：

   hive_create_sqls/
   ├── your_database_user.sql
   ├── your_database_orders.sql
   ├── your_database_products.sql

    

---

💡 可选增强功能

如果你使用的是 Beeline 而不是传统 Hive CLI，可以将这行：

HIVE_CMD="hive"

改为：

HIVE_CMD="beeline -u 'jdbc:hive2://your_hive_server:10000' -n hiveuser -p yourpassword"

 

 

在输出建表语句时能否控制输出的内容？比如不输出LOCATION?

 

ChatGPT said:

非常好的问题 👍，你问到了 Hive SHOW CREATE TABLE 输出的定制化问题。
Hive 原生命令的确会输出很多内容，比如 LOCATION、TBLPROPERTIES、serde 等，但默认 无法通过参数直接控制隐藏部分字段。
不过，有几种可行的变通方法👇

---

🧩 一、Hive 自带 SHOW CREATE TABLE 没有过滤选项

命令：

SHOW CREATE TABLE my_table;

输出是固定模板，不能通过命令参数控制隐藏某些部分（如 LOCATION、TBLPROPERTIES）。

👉 所以只能通过“后处理”的方式来“过滤掉不想要的行”。

---

🧠 二、方法1：用 Shell + grep/sed 过滤输出（推荐）

在导出时直接过滤掉某些关键字的行，比如 LOCATION：

hive -S -e "SHOW CREATE TABLE my_database.my_table;" \
  | grep -v '^LOCATION' \
  | grep -v '^TBLPROPERTIES' \
  > create_my_table.sql

 

这样输出文件中就不会有这些行。

如果用脚本批量导出，也可以这样嵌入：

 

${HIVE_CMD} -S -e "SHOW CREATE TABLE ${DB_NAME}.${t};" \ | grep -v '^LOCATION' \ | grep -v '^TBLPROPERTIES' \ > ${OUTPUT_DIR}/${DB_NAME}_${t}.sql

---

🧰 三、方法2：用 sed 删除多行内容（适合复杂过滤）

如果你希望不仅删掉单行，还能删掉多行（比如整个 TBLPROPERTIES (...) 块），可以用 sed：

${HIVE_CMD} -S -e "SHOW CREATE TABLE ${DB_NAME}.${t};" \
  | grep -v '^LOCATION' \
  | grep -v '^TBLPROPERTIES' \
  > ${OUTPUT_DIR}/${DB_NAME}_${t}.sql

 

解释：

• /^LOCATION/ d → 删除以 LOCATION 开头的行

• /^TBLPROPERTIES/,/^\)/ d → 删除 TBLPROPERTIES 到右括号之间的所有行

---

💡 四、方法3：通过 DESCRIBE FORMATTED 或 DESCRIBE EXTENDED 自定义解析

Hive 也能用：

DESCRIBE FORMATTED my_table;

或者：

DESCRIBE EXTENDED my_table;

这会输出表的元信息（含字段、存储格式、位置、owner等）。
然后你可以选择性解析其中的字段来“重建”建表语句。

👉 优点：能完全控制要哪些信息
👉 缺点：需要自己写脚本拼接 SQL，较麻烦。

这种方式一般用于开发工具自动生成表定义（例如数据迁移脚本）。

---

🚀 五、综合推荐方案（脚本中处理）

如果你只是想导出干净版的建表语句（去掉 HDFS 路径、属性信息），
可以直接在你的批量脚本里替换导出部分：

${HIVE_CMD} -S -e "SHOW CREATE TABLE ${DB_NAME}.${t};" \
  | grep -v '^LOCATION' \
  | grep -v '^TBLPROPERTIES' \
  > ${OUTPUT_DIR}/${DB_NAME}_${t}.sql

 




---

✅ 总结

需求	方法	示例
仅输出建表SQL，去掉 LOCATION	grep -v '^LOCATION'	✅ 简单有效
去掉 LOCATION + TBLPROPERTIES 块	sed '/^LOCATION/ d' + sed '/^TBLPROPERTIES/,/^\)/ d'	✅ 推荐
更灵活自定义输出内容	DESCRIBE FORMATTED + 脚本解析	⚙️ 灵活但复杂