如何查看通过EMR在AWS Glue创建的Hudi表的索引及元数据属性?
查看AWS Glue中Hudi表的索引及元数据属性方法
1. 使用Hudi CLI查询
在EMR集群主节点启动Hudi命令行工具,连接到Hudi表的存储路径后查看属性:
- 执行启动命令:
hudi-cli --base-path s3://你的表存储桶/表路径/ - 在CLI交互界面输入
show properties,输出结果里的hoodie.index.type对应索引类型,hoodie.metadata.enable对应元数据是否启用,其他Hudi专属属性也会一并列出。
2. 通过Spark SQL查询
在EMR的Spark Shell或Zeppelin环境中,执行以下SQL语句:
DESCRIBE EXTENDED 你的Glue Hudi表名;
返回结果里的Table Properties区块会包含所有Hudi相关配置,直接查找对应属性即可。
3. 查看Glue控制台的表属性
登录AWS Glue控制台,找到目标Hudi表,进入表详情页后切换到「属性」标签,在「表属性」区域可以找到所有以hoodie.开头的配置项,其中就包含索引类型、元数据启用状态等信息。
内容的提问来源于stack exchange,提问作者Pawan B
相关产品推荐
相关产品推荐

