![](https://img-blog.csdnimg.cn/20190415182408187.jpeg?x-oss-process=image/resize,m_fixed,h_224,w_224)
云计算/大数据
关于Hadoop系列技术栈, Elastic Stack栈相关的学习
逛逛1973
一位知识构架全面,学术,工程能力强的算法工程师
展开
-
Hadoop分布式集群的搭建
一、 机器的准备,三台虚拟机 二、 ssh免密码登陆 三、 jdk的安装(仅在hadoop000) 四、Hadoop环境配置 五、 hadoop集群环境的分发(执行拷贝命令) 记得要在各个节点让环境生效 六、 HDFS NameNode格式化 在bin目录下面 七、Hadoop集群的启动 八、验证 停止集群 ...原创 2019-04-16 22:07:17 · 130 阅读 · 0 评论 -
Elastic Stack 入门手记(一)
一、Elastic Search (1)本地快速启动es集群的方法 启动命令: D:\Downloads\ElasticSearch\es-rtf-master\bin>elasticsearch D:\Downloads\ElasticSearch\es-rtf-master\bin>elasticsearch -Ehttp.port=8100 -Epath.data=nod...原创 2019-04-15 18:43:30 · 202 阅读 · 0 评论 -
MapReduce分布式框架-WordCount案例实战
combiner - 本地统计,减少传输 partitioner - 分发规则自定义 jobhistory - 记录完整的mapreduce运行信息 - log package wordcount; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.fs.FileSystem; import ...原创 2019-04-13 22:11:06 · 199 阅读 · 0 评论 -
ELK学习 - 环境的搭建
一、es安装使用 下载es安装包之前必须先安装好java,并且在环境变量中新建环境变量JAVA_HOME,设置值是jdk文件夹地址,如: 1、从官方下载中心 ElasticSearch Download 下载ElasticSearch安装包 2、安装完es后,去es目录下/bin/下,启动elasticsearch.bat 完了以后再去启动es服务 看到如图即启动成功 ...原创 2019-04-11 14:38:02 · 161 阅读 · 0 评论 -
Java Api 操作HDFS实战及HDFS读写原理
新建maven工程 - quickstart 1. pom文件引入依赖 <!-- hdfs 依赖 --> <dependency> <groupId>org.apache.hadoop</groupId> <artifactId>hadoop-client</artifact...原创 2019-04-11 13:27:46 · 1367 阅读 · 0 评论 -
zookeeper安装教程- Dubbo注册中心(Zookeeper-3.4.6)
基于 Dubbo 的分布式系统架构视频教程 安装 Dubbo注册中心(Zookeeper-3.4.6) Dubbo建议使用Zookeeper 作为服务的注册中心。 注册中心服务器(192.168.3.71)配置,安装Zookeeper: 1、 修改操作系统的/etc/hosts 文件中添加:# zookeeper servers 192.168.3.71 edu-p...原创 2019-08-26 15:13:43 · 244 阅读 · 0 评论