大数据
Meet_again007
Miss you!单身贵族,姐姐不谈感情
展开
-
在linux上如何安装tomcat-图文详解!
Tomcat的安装1把tomcat的压缩包上传到 /root 下 >rz 或者通过xftp2 解压缩tar -zxvf /root/apache-tomcat-7.0.94.tar.gz3 剪切到/usr/local并命名为tomcatmv apache-tomcat-7.0.94 /usr/local/tomcat4 关闭防火墙关闭防火墙:sys...原创 2019-07-20 15:47:38 · 153 阅读 · 0 评论 -
redis的安装?如何安装redis?发布项目
安装redis 步骤 请一直往下翻给所有窗口发相同命令:xshell-----查看—撰写----撰写窗格一:准备工作(提供nginx实现项目服务器集群统一入口)1 :查看所有主机的ip2 :修改项目 baseUrl 写出nginx的路径3 : idea运行clean 再打包:package4 :进入target目录 剪切项目到桌面 重命名为maven_clou...原创 2019-07-20 21:14:45 · 240 阅读 · 0 评论 -
如何使用JavaAPI操作hdfs?
JavaAPI操作hdfs1 保证jdk是1.82 下载依赖jar:D:\大数据soft\06-Hadoop\安装包\Java1.8环境下编译\hadoop-2.7.3\hadoop-2.7.3\share\hadoop3 创建java项目4 导入所有的jar5 创建类 是个单元测试 进行文件上传6 查看hdfs上的文件7 其他操作创建文件夹:文件下载删除文件...原创 2019-07-20 21:01:02 · 160 阅读 · 2 评论 -
Hadoop词频统计,mapreduce,怎么做一个自己的wordcount?
MapReduce初次体验使用hadoop统计日源文件中的单词个数1 创建一个数据源 message.txt2 开启hadoop>> start-dfs.sh>> start-yarn.sh测试开启是否成功:>>输入jps查看进程3 把数据源 message.txt上传到linux上4 在/usr/local/hadoop/share/h...原创 2019-07-20 20:54:14 · 492 阅读 · 0 评论 -
Hadoop命令,相关操作,常用的hadoop的shell命令有哪些?
Hadoop的shell命令Hadoop介绍:https://www.cnblogs.com/ToDoNow/p/9647939.htmlhttps://www.cnblogs.com/codeOfLife/p/5375120.html统一格式:hadoop fs 1: 文件查询: >>hadoop fs -ls /2: 创建文件夹: >...原创 2019-07-20 20:42:01 · 402 阅读 · 0 评论 -
Hadoop的模块和相关进程介绍
一:模块介绍Hadoop comment: 为hadoop的其他模块提供基础支持(工具类)Hadoop Distributed File System: 高吞吐量的分布式文件管理系统Hadoop MapReduce:大数据的离线的并行计算框架(固定三步:map—reduce–shuffle)Hadoop Yarn: 分布式资源管理框架(MapReduce的扩展):任务调度+资源...原创 2019-07-20 20:34:37 · 244 阅读 · 0 评论 -
hadoop安装,hadoop是什么?如何在linux上安装hadoop?
hadoop介绍如何安装Hadoop?一:规划集群Master36—作为master36Slave36-1—作为slave01Slave36-2—作为slave02二:网络配置1:设置hostname主机名称2:集群所有服务器都需要做:配置静态ip3.1 获取网关:route -n3.2:修改配置文件 /etc/sysconfig/netw...原创 2019-07-20 18:44:36 · 382 阅读 · 0 评论 -
nginx反向代理及注意事项
Nginx的反向代理1 查看与nginx有关的所有文件whereis nginx2 进入/etc/nginx/conf.d 创建文件cloud.conftouch /etc/nginx/conf.d/cloud.conf3 编辑cloud.conf加入内容: #给集群起个名字upstream cloud4{#指定每个服务器的urlserver 192.16...原创 2019-07-20 17:13:05 · 599 阅读 · 0 评论 -
在linux上如何安装nginx
1:打开nginx的官方:http://nginx.org/2:阅读:安装文档:http://nginx.org/en/linux_packages.html#RHEL-CentOS安装yum的依赖:yum install yum-utils3:创建下载nginx的配置:/etc/yum.repos.d/nginx.repo3.1创建文件:》》touch /etc/yum.repos...原创 2019-07-20 17:02:41 · 127 阅读 · 0 评论 -
如何在linux上安装mysql-步骤详解
Mysql安装1打开mysql的官网:下载yum源Yum:类似于360软件管家 负责对软件的在线下载 自动安装 在线更新2 把yum源上传到root下mysql80-community-release-el7-3.noarch.rpm3 安装yum源》rpm -Uvh mysql80-community-release-el7-3.noarch.rpm4 更改配置文件:...原创 2019-07-20 16:08:50 · 644 阅读 · 0 评论 -
Shell编程详解,如何用shell进行编程?shell操作?xshell乱码集解决中文乱码
Shell编程注意:1 等号两边不能加空格2 在shell中换行表示语句结束 分号(;)表示语句结束3 shell的执行文件后缀名是.sh4 在windows中通过notepad++创建shell文件时 点击右下角 转换为unix格式(unix和windows的换行符号不一致)5 字符串都写在单引号中1 数据类型: 字符串 浮点类型 整数类型2 定义变量: ...原创 2019-07-20 21:33:39 · 384 阅读 · 0 评论