hadoop
Meet_again007
Miss you!单身贵族,姐姐不谈感情
展开
-
hadoop安装,hadoop是什么?如何在linux上安装hadoop?
hadoop介绍如何安装Hadoop?一:规划集群Master36—作为master36Slave36-1—作为slave01Slave36-2—作为slave02二:网络配置1:设置hostname主机名称2:集群所有服务器都需要做:配置静态ip3.1 获取网关:route -n3.2:修改配置文件 /etc/sysconfig/netw...原创 2019-07-20 18:44:36 · 369 阅读 · 0 评论 -
Hadoop的模块和相关进程介绍
一:模块介绍Hadoop comment: 为hadoop的其他模块提供基础支持(工具类)Hadoop Distributed File System: 高吞吐量的分布式文件管理系统Hadoop MapReduce:大数据的离线的并行计算框架(固定三步:map—reduce–shuffle)Hadoop Yarn: 分布式资源管理框架(MapReduce的扩展):任务调度+资源...原创 2019-07-20 20:34:37 · 227 阅读 · 0 评论 -
Hadoop命令,相关操作,常用的hadoop的shell命令有哪些?
Hadoop的shell命令Hadoop介绍:https://www.cnblogs.com/ToDoNow/p/9647939.htmlhttps://www.cnblogs.com/codeOfLife/p/5375120.html统一格式:hadoop fs 1: 文件查询: >>hadoop fs -ls /2: 创建文件夹: >...原创 2019-07-20 20:42:01 · 390 阅读 · 0 评论 -
Hadoop词频统计,mapreduce,怎么做一个自己的wordcount?
MapReduce初次体验使用hadoop统计日源文件中的单词个数1 创建一个数据源 message.txt2 开启hadoop>> start-dfs.sh>> start-yarn.sh测试开启是否成功:>>输入jps查看进程3 把数据源 message.txt上传到linux上4 在/usr/local/hadoop/share/h...原创 2019-07-20 20:54:14 · 483 阅读 · 0 评论 -
redis的安装?如何安装redis?发布项目
安装redis 步骤 请一直往下翻给所有窗口发相同命令:xshell-----查看—撰写----撰写窗格一:准备工作(提供nginx实现项目服务器集群统一入口)1 :查看所有主机的ip2 :修改项目 baseUrl 写出nginx的路径3 : idea运行clean 再打包:package4 :进入target目录 剪切项目到桌面 重命名为maven_clou...原创 2019-07-20 21:14:45 · 230 阅读 · 0 评论