- 博客(9)
- 收藏
- 关注
RSS订阅转载 Solr配置
本文简单描述SolrCloud的特性，基本结构和入门，基于Solr4.5版本。 Lucene是一个Java语言编写的利用倒排原理实现的文本检索类库。Solr是以Lucene为基础实现的文本检索应用服务。 SolrCloud是Solr4.0版本开发出的具有开创意义的基于Solr和Zookeeper的分布式搜索方案，或者可以说，SolrCloud是Solr的一种部署方式。Solr可以以多种
2016-07-28 20:32:43
496
转载 flume构建高可用的hadoop平台
1.概述 今天补充一篇关于Flume的博客，前面在讲解高可用的Hadoop平台的时候遗漏了这篇，本篇博客为大家讲述以下内容： Flume NG简述单点Flume NG搭建、运行高可用Flume NG搭建Failover测试截图预览 下面开始今天的博客介绍。 2.Flume NG简述 Flume NG是一个分布式，高可用，可靠的系统，它能将不同的海量数据收集，移动并存储
2016-07-26 10:17:10
437
转载 kafka配置
kafka 集群--3个broker 3个zookeeper创建实战 准备工作： 1. 准备3台机器，IP地址分别为：192.168.0.10，192.168.0.11，192.168.0.12 2. 下载kafka稳定版本，我的版本为：kafka_2.9.2-0.8.1.1.tgz 3. 分别解压放入到想安装的目录下，我的目录为:/home/www 解压命令为： tar
2016-07-25 16:57:06
282
转载 HBase 写优化之 BulkLoad 实现数据快速入库
1、为何要 BulkLoad 导入？传统的 HTableOutputFormat 写 HBase 有什么问题？ 我们先看下 HBase 的写流程： 通常 MapReduce 在写HBase时使用的是 TableOutputFormat 方式，在reduce中直接生成put对象写入HBase，该方式在大数据量写入时效率低下（HBase会block写入，频繁进行flush，split，
2016-07-13 15:02:06
1192
转载 Flume
flume是一个分布式、可靠、和高可用的海量日志采集、聚合和传输的系统。支持在日志系统中定制各类数据发送方，用于收集数据;同时，Flume提供对数据进行简单处理，并写到各种数据接受方(比如文本、HDFS、Hbase等)的能力 。 一、什么是Flume? flume 作为 cloudera 开发的实时日志收集系统，受到了业界的认可与广泛应用。Flume 初始的
2016-07-12 21:59:36
874
转载 Flume
一、认识flume 1.flume是什么？ 这里简单介绍一下，它是Cloudera的一个产品 2.flume是干什么的？ 收集日志的 3.flume如何搜集日志？ 我们把flume比作情报人员 （1）搜集信息 （2）获取记忆信息 （3）传递报告间谍信息 flume是怎么完成上面三件事情的，三个组件： source： 搜集信息 channel：传递信息 sink：存储信息
2016-07-11 21:52:30
950
转载 机器学习——模型评估与模型选择
评价一个机器学习模型的好坏需要特定的评估方法，并据此对模型进行选择，从而得到一个更好的模型。本文主要是关于模型评估与模型选择的笔记，以及利用 scikit-learn 对 Logistic 回归进行的结果进行交叉检验。 1. 训练误差，测试误差与泛化误差 学习器（模型）在训练集上表现出来的误差称为 训练误差（training error） 或 经验误差（empirical error）
2016-07-10 22:52:21
4075
转载 swarm-run.sh
#/bin/bash DOCKER_MACHINE_DRIVER=virtualbox function create_kvstore { echo echo "Preparing Key-Value store: etcd ..."
2016-07-07 09:31:32
282
转载 iptables
防火墙，其实说白了讲，就是用于实现Linux下访问控制的功能的，它分为硬件的或者软件的防火墙两种。无论是在哪个网络中，防火墙工作的地方一定是在网络的边缘。而我们的任务就是需要去定义到底防火墙如何工作，这就是防火墙的策略，规则，以达到让它对出入网络的IP、数据进行检测。 目前市面上比较常见的有3、4层的防火墙，叫网络层的防火墙，还有7层的防火墙，其实是代理层的网关。
2016-07-05 13:56:15
203
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人