- 博客(2)
- 收藏
- 关注
原创 Learning Spark笔记11-加载保存数据
5.加载,然后保存数据 工程师希望发现更多的输出格式来适合下游的消费者。数据科学家可能关注数据已经存在的格式。 5.1动机 Spark提供了一个各种各样输入输出数据源的操作。 文件格式与文件系统 文件格式:text、JSON、SequenceFIles、protocol buffers 文件系统:NFS、HDFS、S3 通过SparkSQL结构
2017-07-26 11:39:36 376
原创 sqoop hive与mysql互导数据
sqoop mysql互导hive mysql导入到hive 环境 hive-1.1.1 sqoop-1.4.6.bin__hadoop-2.0.4-alpha mysql Ver 14.14 Distrib 5.1.73, for redhat-linux-gnu (x86_64) using readline 5.1 1.异常 ERROR manager.Sql
2017-07-05 08:19:32 1375
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人