- 博客(4)
- 资源 (3)
- 收藏
- 关注
原创 从 "org.apache.hadoop.security.AccessControlException:Permission denied: user=..." 看Hadoop 的用户登陆认证
如果远程提交任务给Hadoop 可能会遇到 "org.apache.hadoop.security.AccessControlException:Permission denied: user=..." , 当然,如果是spark over YARN, 也同样会遇到类似的问题,例如: An error occurred while calling None.org.apache.spark.api.java.JavaSparkContext.: org.apache.hadoop.security.Ac
2016-04-19 20:36:47 26884 3
原创 从 "No module named pyspark" 到远程提交 spark 任务
能在本地Mac环境用python提交spark 任务会方便很多,但是在安装了 spark-1.6-bin-without-hadoop (spark.apache.org/download) 之后,在python 中 “import pyspark” 会报“no module named pyspark” 错误。 没错,这种错误都是 路径问题......
2016-04-16 21:50:28 20649 1
原创 RStudio: Warning message: Setting LC_CTYPE failed, using "C" 浅析
RStudio 不能显示中文? 问题是怎样的呢?.... Mac OS 是一个类Linux系统,在Linux中,locale来设置程序运行的不同语言环境,locale由 ANSI C提供支持。locale的命名规则为_.,如zh_CN.GBK,zh代表中文, CN代表大陆地区,GBK表示字符集。在locale环境中,用一组变量代表国际化环境中的不同设置.....
2016-04-10 21:39:56 11155 3
原创 如何评估社交网络中信息内容的价值呢?
信息内容和社交结构构成一个双重反馈回路,社交结构影响信息扩散,而信息则影响社会结构的变化。如何看待社交网络中信息内容的价值呢?尝试从数据的维度给出了信息内容价值评估的线性表达: Vm = m1*Ve + m2*Vf +m3*Vs
2016-04-02 11:04:13 2656
计算机世界1000期特稿——信息革命的流金岁月
2008-11-24
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人