HIVE建表读取CSV文件数据

最新推荐文章于 2024-07-27 14:17:43 发布

khx0910

最新推荐文章于 2024-07-27 14:17:43 发布

阅读量6.1k

点赞数

分类专栏： hive 文章标签： hive csv

本文链接：https://blog.csdn.net/khx0910/article/details/106011834

版权

在尝试从CSV文件加载数据到Hive表时，遇到所有列都存储在首字段的问题。问题源于Hive默认的列分隔符(01)与CSV文件不符。解决方案是通过指定ROW FORMAT DELIMITED FIELDS TERMINATED BY ','以及在SERDEPROPERTIES中设定'serialization.format'和'field.delim'为','，以确保正确解析CSV文件的列分隔符。这样可以确保CSV文件的数据能正确插入到Hive表的相应字段。" 126088721,12001699,使用Kruskal算法解决Acwing 859最小生成树问题,"['算法', '图论', '数据结构']

摘要由CSDN通过智能技术生成

HIVE建表读取CSV文件数据

事由
- 解决办法

事由

读取log日志文件，存储到csv 格式，再load到hive表，发现所有的csv列均存储到hive表的首个字段钟，hive建表语句

 CREATE TABLE test.dbl_20clw_base (
  sbbh STRING, 
  spn STRING, 
  spnname STRING, 
  fmi STRING, 
  fminame STRING, 
  gzsj STRING, 
  exchangecode STRING
)
PARTITIONED BY (
  pdate STRING
)