Sqoop
一只懒得睁眼的猫
励志成为一个技术大牛!
展开
-
Sqoop---Got exception in update thread: com.mysql.jd bc.exceptions.jdbc4.MySQLSyntaxErrorException
问题:通过sqoop将mysql中的数据导入到hdfs的时候,日志停留在map 100% reduce 0%不动。如下所示:16/07/21 11:46:09 INFO mapreduce.Job: Job job_1469064014798_0012 running in uber mode : false16/07/21 11:46:09 INFO mapreduce.Job: map 0%原创 2016-07-21 16:28:19 · 2278 阅读 · 0 评论 -
Sqoop架构以及应用介绍
本篇文章在具体介绍Sqoop之前,先给大家用一个流程图介绍Hadoop业务的开发流程以及Sqoop在业务当中的实际地位。 如上图所示:在实际的业务当中,我们首先对原始数据集通过MapReduce进行数据清洗,然后将清洗后的数据存入到Hbase数据库中,而后通过数据仓库Hive对Hbase中的数据进行统计与分析,分析之后将分析结果存入到Hive表中,然后通过Sqoop这个工具将我们的数据挖原创 2016-05-25 21:18:45 · 20186 阅读 · 0 评论 -
Django系列7---cookie、session、json、csrf_token
博客核心内容:原创 2017-10-07 16:45:00 · 748 阅读 · 0 评论