电商数仓DIM层的日期维度表的创建问题
格式错误:无效后缀,date_info.txt是tsc格式,行式存储,但是创建的表格是orc,列式存储(统计分析列式更快)但是直接将表格上传到HDFS,在表格中并不会显示数据,会有如下报错。需要把date_info.txt文档上传来把数据导入表格,(DIM层维度表要快速做统计分析,要列式存储)(2)将数据文件上传到HFDS上临时表路径。读tsv格式的数据填到orc格式的表中。(3)执行以下语句将其导入时间维度表。序列化和反序列化serde,(4)检查数据是否导入成功。
原创
2023-11-08 23:51:20 ·
140 阅读 ·
0 评论