数据相关(数据分析/大数据)
Algorithm_goddness
这个作者很懒,什么都没留下…
展开
-
Mapreduce编程常见问题汇总
1.security.UserGroupInformation:PriviledgedActionException 权限异常解决办法:修改hdfs /tmp目录权限hadoop@master:~/hadoop-1.0.4/bin$ ./hadoop dfs -chmod -R 777 /tmphadoop@master:~/hadoop-1.0.4/bin$ ./hadoop dfs...原创 2017-07-05 08:59:32 · 2271 阅读 · 0 评论 -
[日常Debug]Hive问题之org.apache.hadoop.security.AccessControlException
org.apache.hadoop.security.AccessControlExceptionhive> load data local inpath 'clickstream.txt' into table user_dimension; FAILED: Hive Internal Error: java.lang.RuntimeException(org.apach...原创 2017-07-04 21:06:48 · 567 阅读 · 0 评论 -
MPI并行程序设计学习整理
时间坐标:2017.06 大三下MPI并行编程是在大数据处理中很有意义的方法,能够在串行的基础上提高程序运行的效率,并行的去计算海量的数据。 这篇文章可能会随着学习的深入不断的更新~Introduction to MPI 学MPI的时候,老师首先给我们回顾了一下并行编程的一些模式: 并行可以分为两种:一种是任务并行,另一种是数据并行,根据这两种性质可以分为以下4种模式: SIMD(Sing原创 2017-06-08 17:00:17 · 1978 阅读 · 0 评论