如何查看存储在HDFS中表数据的字段类型

在某次查询中,发现用spark引擎查询表报错,但是用MR引擎查询同一张表却正常,经过分析,发现是表的定义字段类型和实际存储的字段类型不一样,那么,如何查看字段的存储类型呢?

 

1.: 先通过show create tablename,找到表的存储路径:hdfs://whch/apps/hive/warehouse/ods_lms.db/bl_charge_order_dtl

2.然后通过 su hdfs切换到hdfs用户,查看存储目录下的数据块信息,语句如下

hdfs dfs -ls hdfs://whch/apps/hive/warehouse/ods_lms.db/bl_charge_order_dtl

3.之后复制某一个数据块路径执行语句, -n 100 意思是只输出最后100行。 语句如下:

hdfs dfs -cat hdfs://whch/apps/hive/warehouse/ods_lms.db/bl_charge_order_dtl/23adde06-861f-4ec4-9c75-e46f72860500.parquet | tail -n 100

4.输出的语句中,就包含各个字段的存储格式等信息了

  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值