在这里说的都是踩过的一些坑,和一些操作步骤,如果需要可以认真的去阅读一下。本文不代表任何立场,仅仅是简单的记录下自己遇到的坑,给自己的经历做一个点点滴滴的记录。如有任何侵权或者其他问题,请立刻联系我进行雪藏,甚至删除,谢谢大家的合作。
邮箱:1326330617@qq.com
需要准备的材料,注意事项
- 官方提供的iso镜像文件,内含所有数据,包括项目数据等。
- 根据内含数据和项目,选择合适的软件,推荐使用官方说明文档内规定的软件,也可以自选,避免系统的不兼容性(比如在虚拟机方面,windows10 对VirtualBox 4.X直接不兼容,需要安装VirtualBox 5.X版本),还请注意下软件的兼容性问题。
- 网络的问题,推荐使用路由器做局域网,而且这个路由器不要进行大批量下载任务(如迅雷下载、百度网盘等下载工具),这是为了避免网络堵塞可能导致的连接超时,设置路由器局域网内ip可以互相访问(路由器默认是可以访问的),建议在路由器配置好后进行ping操作,保证网络一定是通畅的,毕竟磨刀不误砍柴工。
- 笔记本或者单台PC可能会因为性能,造成程序运行缓慢,甚至连接超时或假死。建议使用多台PC进行任务处理,在内网(局域网)对各台PC进行连接,一定要了解各台服务器服务通讯方式、协议、端口号,准确判断服务连接错误的原因,准确定位。
- Hadoop环境配置,严格按照操作手册进行,不能遗漏任何步骤,尤其是第一遍配置,按部就班的重复。再熟悉了流程之后,再去了解每一步做了什么,什么用。
- 微信小程序……未完待续
各项的实际操作步骤
在写这篇文章的时候,基本工作都已经完成,就不再此提供每一步骤的操作截图。还请各位认真去看文章,慢慢去了解每一个步骤。有不懂的我还是推荐搭建去百度搜索自己想要的答案,高效的利用搜索引擎,也是提高工作效率的一种方式。
一、大数据环境搭建与操作
开发环境
- 开发语言:Java和JavaEE框架。
- HBase数据库镜像和HbaseExplorer工具。
- MongoDB数据库
- Eclipse开发工具Robo 3T工具
- MySQL数据库
软件版本对应
软件会提供,在无法运行时可使用其他版本&