- 博客(10)
- 资源 (60)
- 收藏
- 关注
原创 CentOS7上Apache impala2.7集成apache kudu1.3
Apache impala集成apache kudu1.环境准备1.1.服务器配置 ID IP address Hostname Notes 1 192.168.56.181 apollo.dt.com Hadoop Master 2. Spark Master 3.Kudu Master 4. Impala Master 5.
2017-06-21 15:01:06 4331 8
原创 CentOS7.0安装配置Storm集群
1.环境准备操作系统: CentOS7.0Zookeeper版本:zookeeper-3.4.10Storm版本:apache-storm-1.1.0JDK版本:jdk1.8.0_77Python版本:集群配置如下: # os hostname ip software notes 1 CentOS7 apollo.dt.com 192.168.56.1
2017-06-21 13:56:04 4377 1
原创 Apache Storm简介
Storm是一个免费开源、分布式、高容错的实时计算系统。Storm令持续不断的流计算变得容易,弥补了Hadoop批处理所不能满足的实时要求。Storm经常用于在实时分析、在线机器学习、持续计算、分布式远程调用和ETL等领域。Storm的部署管理非常简单,而且,在同类的流式计算工具,Storm的性能也是非常出众的
2017-06-20 11:26:40 3281
原创 CentOS7.0配置couchbase集群
1.环境准备服务器配置 ID IP address Hostname Notes 1 192.168.56.181 apollo.dt.com couchbase 2 192.168.56.182 artemis.dt.com couchbase 3 192.168.56.183 uranus.dt.com couchbase2.单机安
2017-06-19 14:49:21 1827
原创 CentOS7.0安装配置CouchBase
简介Couchbase 是一个开源的、分布式的、面向文档(document-oriented)的 NoSQL 数据库,并且内置了 Memcached 服务。本文分享的是自己在 Linux 上成功安装 Couchbase Server 的实际操作步骤。1.下载Couchbase1.1.登录Couchbase官网, 如下图所示:1.2.直接下载或者通过wget[root@apollo dtadmin~]
2017-06-19 10:33:30 1887
原创 MySQL使用UDF调用shell脚本
在最近的项目中,由于需要使用MySQL的UDF(user defined function),这个特性从未使用过,而且个人觉得这个特性以后应该会经常使用,所以写下博文,记录和分享这个特性的用法。UDF是mysql的一个拓展接口,UDF(Userdefined function)可翻译为用户自定义函数,这个是用来拓展Mysql的技术手段。
2017-06-14 15:20:54 4130
原创 CentOS7.0安装配置redis集群
1.redis集群简介redis集群在启动的时候就自动在多个节点间分好片。同时提供了分片之间的可用性:当一部分redis节点故障或网络中断,集群也能继续工作。但是,当大面积的节点故障或网络中断(比如大部分的主节点都不可用了),集群就不能使用。 所以,从实用性的角度,Redis集群提供以下功能: ● 自动把数据切分到多个redis节点中 ● 当一部分节点挂了或不可达,集群依然能继续工作2
2017-06-13 17:00:30 872
原创 CetnOS7.0安装配置Kafka集群
1.简介Kafka是一种高吞吐的分布式发布订阅消息系统,能够替代传统的消息队列用于解耦合数据处理,缓存未处理消息等,同时具有更高的吞吐率,支持分区、多副本、冗余,因此被广泛用于大规模消息数据处理应用。Kafka支持Java及多种其它语言客户端,可与Hadoop、Storm、Spark等其它大数据工具结合使用。 本教程主要介绍Kafka在CentOS7上的安装和使用,包括功能验证和集群的简单配置。2
2017-06-12 14:47:27 1853
原创 CentOS7安装配置zookeeper集群
1.简介Zookeeper有三种运行模式:单机模式、伪集群模式和集群模式。 安装zookeeper的先决条件是首先保证已安装Java运行环境。 zookeeper是一个分布式的,开放源码的分布式应用程序协调服务,是Google的Chubby一个开源的实现,是Hadoop和Hbase的重要组件,是一个为分布式应用提供一致性服务的软件,提供的功能包括:配置维护、域名服务、分布式同步、组服务等。Zoo
2017-06-12 10:55:43 4545
原创 CentOS7.0基于hadoop集群安装配置Hive
前言安装Apache Hive前提是要先安装hadoop集群,并且hive只需要在hadoop的namenode节点集群里安装即可(需要再有的namenode上安装),可以不在datanode节点的机器上安装。还需要说明的是,虽然修改配置文件并不需要把hadoop运行起来,但是本文中用到了hadoop的hdfs命令,在执行这些命令时你必须确保hadoop是正在运行着的,而且启动hive的前提也需要h
2017-06-07 13:18:02 7931 2
Oracle 10g RAC的负载均衡配置
2011-10-20
DataAdapter是如何更新数据库数据的
2009-09-17
Arraylist 的用法
2009-09-17
MD5算法之C#程序 MD5算法描述
2009-09-16
GridView用法大合集
2009-06-29
CSharp从入门到精通全攻略
2009-04-27
C#编程新手入门通(内含PDG格式阅读软件)
2009-04-23
学习C#入门必看的实例程序.rar
2009-04-23
高级PLSQL编程(包、过程、函数、触发器等的详细介绍)
2009-04-22
DataGridView控件用法合集
2009-04-22
vs2005水晶报表1小时速成教程.txt
2009-04-22
实战Visual C#数据库编程
2009-04-21
Storm分布式实时计算模式.pdf
2017-08-16
Spark高级数据分析 (美) sandy ryza;uri laserson; 龚少成(译) ---文字版.pdf
2017-08-16
Spark快速大数据分析.pdf
2017-08-16
Spark实战高手之_从零开始.pdf
2017-08-16
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人