![](https://img-blog.csdnimg.cn/20201014180756738.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据
xiaozou_it
这个作者很懒,什么都没留下…
展开
-
ambari大数据平台搭建的安装(全)
本篇主要说明离线安装的流程,如需查看在线安装的可以看以前博文https://blog.csdn.net/xiaozou_it/article/details/82911160一、安装前的一些准备(离、在线皆需先完成)1、推荐四台虚拟机器(本文以centos为例)2、虚拟机能使用网络(可查看):https://blog.csdn.net/xiaozou_it/article/details/...原创 2018-10-12 15:48:00 · 894 阅读 · 0 评论 -
Ambari——大数据平台的搭建利器
Ambari 是什么Ambari 跟 Hadoop 等开源软件一样,也是 Apache Software Foundation 中的一个项目,并且是顶级项目。目前最新的发布版本是 2.0.1,未来不久将发布 2.1 版本。就 Ambari 的作用来说,就是创建、管理、监视 Hadoop 的集群,但是这里的 Hadoop 是广义,指的是 Hadoop 整个生态圈(例如 Hive,Hbase,Sqo...转载 2018-09-30 16:29:55 · 316 阅读 · 0 评论 -
ambari安装使用MySQL数据库的具体方法
一、需要先下载数据库并安装1、使用 yum list|grep mysql 查看yum上的可用MySQL版本2、然后使用 yum installd mysql安装MySQL数据库3、查看数据库状态:chkconfig status mysql4、启动数据库:systemctl mysqld start5、使用mysql命令登录数据库二、使用ambari装mysql1、重点在于需要自己...原创 2018-10-10 18:17:35 · 3007 阅读 · 0 评论 -
org.apache.solr.common.SolrException: Cannot connect to cluster at 192.168.2.220:2181: cluster not f
org.apache.solr.common.SolrException: Cannot connect to cluster at 192.168.2.220:2181: cluster not found/not ready at org.apache.solr.common.cloud.ZkStateReader.createClusterStateWatchersAndUpdate(Zk...原创 2018-11-12 16:09:52 · 3326 阅读 · 3 评论 -
ambari自定义添加服务组件
本文是在学习过程中遇到的问题,用此篇以记录。以Redis为例。首先需要了解自定义ambari组件方式,参考:https://www.jianshu.com/p/3028736597e7官方GitHub用例地址:https://github.com/Symantec/ambari-redis-service离线下载RPM包方式借鉴:https://blog.csdn.net/ZhouyuanL...原创 2018-12-03 10:30:10 · 2090 阅读 · 1 评论 -
yarn入门学习介绍
本篇将从以下几个方面阐述yarn1、产生的原因2、简介3、适用情况1、产生的原因yarn的出现是由于hadoop1.0版本中的 jobtracker负载过重,导致计算上限极小,无法满足大量数据工作的需求。首先来看一看hadoop1.0的架构图,以便整体了解此时MapReduce计算模型是直接运行在hdfs上的,因此造成了以下的问题。看一看hadoop1.0中的MapRed...原创 2019-01-17 15:44:00 · 850 阅读 · 0 评论 -
全文检索技术原理
Lucene是solr实现的基础,而Lucene的实现基础是全文检索技术接下就谈谈基础的全文检索技术实现的原理。检索是指对数据的,所以检索技术是针对于某一种或特有的类型的数据。而针对于不同的数据类型对应有不同的检索方式。数据的分类结构化数据:具有固定格式或有限长度的数据,数据库、元数据非结构化数据:长度不定或无固定格式的数据,邮件、Word文档扫描方法顺序扫描法:如想查找某个文...原创 2019-01-17 17:07:21 · 1857 阅读 · 0 评论 -
ambari添加redis组件(包含有 redis-sentinel和redis cluster)
github上下载相应的组件文件redis-sentinel相应的地址:https://github.com/Symantec/ambari-redis-serviceredis cluster 插件地址:https://github.com/cas-bigdatalab/ambari-redis-cluster(里面附带有rpm包下载地址,两个都需要下载)安装可使用shell脚本一键解决...原创 2019-04-29 10:48:30 · 853 阅读 · 0 评论