关闭

solr配置文件

/letv/data/tomcat-solr/conf/server.xml <Listener className="org.apache.catalina.core.AprLifecycleListener" SSLEngine="o...
阅读(147) 评论(0)

负载均衡

负载均衡服务器只负责转发给weblogic等服务器,session共享...
阅读(153) 评论(0)

Solr

Solr是一个独立的企业级搜索应用服务器,它对外提供类似于Web-service的API接口。用户可以通过http请求,向搜索引擎服务器提交一定格式的XML文件,生成索引;也可以通过Http Get操作提出查找请求,并得到XML格式的返回结果solr 部署在了tomcat上,所以访问的时候是通过ip:端口/webapps/路径访问/letv/data/solrhome/solr.xml 下配置了管理...
阅读(205) 评论(0)

zookeeper

zookeeper分布式应用程序协调服务,是Hadoop和Hbase的重要组件。提供的功能包括:配置维护、域名服务、分布式同步、组服务等。Zookeeper:主要是用来解决分布式应用中经常遇到的一些数据管理问题,如:统一命名服务、状态同步服务、集群管理、分布式应用配置项的管理等。 Znode维护着数据、ACL(access control list,访问控制列表)、时间戳等交换版本号等数据结构,它...
阅读(175) 评论(0)

Sqoop

Sqoop在Hadoop(Hive)与传统的数据库(mysql)间进行数据的传递...
阅读(176) 评论(0)

Hive

Hive数据仓库 可以将sql变成mapreduce任务 HIVE:HQL和MySQL语句相差不多 1.Hive不支持行级插入操作、更新操作和删除操作,同时它也不支持事务。 2.Hive中数据库的概念本质上仅仅是表的一个目录或者命名空间。如果用户没有显式指定数据库,就会默认使用默认库default。 3.默认创建的是托管表,在load时不检查数据是否符合格式,因为load是移动操作,将数据从...
阅读(356) 评论(0)

Flume

Flume海量日志采集、聚合和传输的系统 Flume-Og Flume-Og采用了分层架构:分别为agent,collector和storage。其中,agent和collector均由两部分组成:source和sink,source是数据来源,sink是数据去向。storage是存储系统,可以是一个普通file,也可以是HDFS,HIVE,HBase,分布式存储等。 Master是管理协...
阅读(768) 评论(0)

Ganglia

Ganglia集群监视项目,包括gmond、gmetad以及一个Web前端 Gmond :是一个守护进程,他运行在每一个需要监测的节点上,收集监测统计,发送和接受在同一个组播或单播通道上的统计信息 如果他是一个发送者(mute=no)他会收集基本指标,比如系统负载(load_one),CPU利用率。他同时也会发送用户通过添加C/Python模块来自定义的指标。 如果他是一个接收者(deaf=no)...
阅读(472) 评论(0)

Hadoop

Hadoop:分布式系统基础架构 HDFS(分布式文件系统) 配置的位置: /letv/data/hadoop-2.6.0/etc/Hadoop 配置hdfs-site.xml: hadoop2.0官方提供了两种HDFS HA的解决方案,一种是NFS,另一种是QJM(Qurom Journal Manager)。这里我们使用简单的QJM。在该方案中,主备NameNode之间通过一组Jour...
阅读(302) 评论(0)

欢迎使用CSDN-markdown编辑器

欢迎使用Markdown编辑器写博客本Markdown编辑器使用StackEdit修改而来,用它写博客,将会带来全新的体验哦: Markdown和扩展Markdown简洁的语法 代码块高亮 图片链接和图片上传 LaTex数学公式 UML序列图和流程图 离线写博客 导入导出Markdown文件 丰富的快捷键 快捷键 加粗 Ctrl + B 斜体 Ctrl + I 引用 Ctrl...
阅读(127) 评论(0)
    个人资料
    • 访问:17445次
    • 积分:802
    • 等级:
    • 排名:千里之外
    • 原创:51篇
    • 转载:76篇
    • 译文:0篇
    • 评论:0条
    文章分类
    阅读排行
    评论排行