最近有感没有可用的平台可供练习代码,故从阿里云上租借了一年的服务器,供平时的研究与练手。
设想配置
Centos7 + hadoop2.7 + hive2.0+ mysql5.7 + spark + python 3.5
以上搭配没有明确的工程应用,存粹是为了练手
安装hadoop2.7
主要参考了这篇博客:
http://www.powerxing.com/install-hadoop-in-centos/
环境配置很重要
安装mysql5.7
主要参考了这篇博客:
https://www.cnblogs.com/starof/p/4680083.html
安装python3.5
主要参考这篇博客:
http://blog.csdn.net/chris__kk/article/details/45127973
安装hive2.0
主要参考了这篇博客:
https://www.cnblogs.com/starof/p/4680083.html
其中环境的配置参考了这篇:
http://blog.csdn.net/youfashion/article/details/51029167
hive2.0的环境配置研究了近一周,最后根据上述博客,去除无需配置的内容,成功配置。
安装spark
尚未安装