![](https://img-blog.csdnimg.cn/20201014180756927.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据
Maertin Romber
工作ing
展开
-
配置Hadoop环境
1.编辑profile文件 export JAVA_HOME=/usr/lib/jvm/jdk/ export HADOOP_INSTALL=/sur/local/hadoop export PATH=$PATH:$HADOOP_INSTALL/bin export PATH=$PATH:$HADOOP_INSTALL/sbin export HADOOP_MAPRED_HOME=$HADOO...原创 2018-10-19 10:24:18 · 231 阅读 · 0 评论 -
windows系统快速搭建pyspark环境(Anaconda)炒鸡简单
刚开始我尝试在Windows系统和Ubuntu系统单独配置spark hadoop ,发现很是复杂,尤其在环境配置等方面总是出现一些问题不好解决,所以我采用了另一种思路,发现特别快速和简介,相比和我一样想快速使用spark的小伙伴都已经迫不及待了! 总体思路是首先下载anaconda,然后再用anaconda下载pyspark,然后一切就完成了! 1.下载Anaconda 此篇只尝试了win...原创 2018-11-05 17:07:41 · 2959 阅读 · 8 评论