Spark日志——字符串切分|问题,连接mysql没有合适驱动包问题,数据库插入数据的顺序问题
2019-05-19 日志记录
项目
高效数据分析
内容
使用spark1.6.0(scala)根据话单数据统计其中某个字段,排序并导入mysql。
问题
1、读取到以”|“为分隔符得到数据后,使用”|“split,得到的rdd格式是将一行数据所有元素全部单独拆成了单独的元素,如:
"2091|1|23|asd" 应该拆成 Array("2091","1","23","as...
原创
2019-05-20 08:51:34 ·
357 阅读 ·
0 评论