如何移除Hive表的一个分区列并保留其数据为普通列？

Hive本身不支持直接从现有表中移除分区列，所以我们需要通过重建表+数据迁移的方式实现需求，全程不会丢失数据。下面是具体步骤，我会结合示例代码说明：

步骤1：确认原表结构 #

假设你的原表是your_db.your_table，结构大概是这样（非分区字段以other_col1, other_col2为例）：

CREATE TABLE your_db.your_table (
    other_col1 string,
    other_col2 int
)
PARTITIONED BY (col1 string, col2 string)
STORED AS ORC; -- 存储格式根据你的实际情况调整

步骤2：创建临时目标表 #

新建一个和原表结构几乎一致的表，唯一区别是只把col1设为分区列，col2作为普通字段：

CREATE TABLE your_db.temp_table (
    other_col1 string,
    other_col2 int,
    col2 string -- 把原分区列col2转为普通列
)
PARTITIONED BY (col1 string) -- 仅保留col1作为分区列
STORED AS ORC; -- 必须和原表存储格式一致

步骤3：迁移原表数据到临时表 #

这一步的关键是把原表的分区列col2作为普通字段插入，同时按col1分区写入。执行以下插入语句：

-- 开启动态分区非严格模式（大表迁移时建议开启）
SET hive.exec.dynamic.partition.mode=nonstrict;

INSERT OVERWRITE TABLE your_db.temp_table PARTITION(col1)
SELECT 
    other_col1,
    other_col2,
    col2, -- 原分区列作为普通字段取出
    col1 -- 用于指定目标表的分区
FROM your_db.your_table;

提示：Hive会自动识别原表的分区列值，不需要手动处理分区目录，执行完后临时表会自动创建col1对应的分区。

步骤4：替换原表 #

先把原表重命名为备份表（防止后续出问题可以回滚），再把临时表重命名为原表名：

-- 备份原表
ALTER TABLE your_db.your_table RENAME TO your_db.your_table_backup;

-- 临时表替换原表
ALTER TABLE your_db.temp_table RENAME TO your_db.your_table;

步骤5：验证结果 #

执行查询确认数据和结构是否符合预期：

-- 查看表结构，确认col2是普通列、col1是分区列
DESCRIBE FORMATTED your_db.your_table;

-- 随机查询数据，确认col2数据完整
SELECT * FROM your_db.your_table LIMIT 10;

-- 查看分区情况，确认只有col1分区
SHOW PARTITIONS your_db.your_table;

额外注意事项 #

• 如果你的表是外部表，创建临时表时建议指定新的LOCATION路径，避免和原表数据目录冲突；也可以先将外部表转为内部表再操作。
• 超大表迁移时，可以考虑分批次插入（比如按col1分区分批处理），避免资源占用过高。
• 操作前务必在测试环境验证流程，确保数据安全。

内容的提问来源于stack exchange，提问作者Ishant Sharma