- 博客(9)
- 资源 (1)
- 问答 (1)
- 收藏
- 关注
原创 Graylog日志收集分析系统部署记录
一.框架描述 框架使用rsylog+kafka+graylog+elasticsearch技术,其中rsyslog作为日志转发和分解工具,kafka作为日志暂存队列和缓存工具,graylog则作为日志流处理以及查询工具,elasticsearch作为日志索引和存储。 首先,rsyslog可以通过不同的输入组件来抓取或接收日志,目前提供的并且有可能使用到的方式包括:tcp、u...
2018-06-25 09:40:24
4161
1
原创 Hadoop+Kylin集群部署过程和问题
一.Hadoop安装初始化工作版本:hadoop:2.7.1hbase:1.3.1hive:2.3.0 kylin:2.0.0 jdk:1.8.01.新建用户和组> groupadd hadoop> useradd -d /home/hadoop -g hadoop -m -s /bin/bash hadoop> passwd hadoop2.为该用户设置ssh免密登陆>...
2018-06-25 09:35:10
1401
转载 算法仓库(三) 决策树分类
决策树是一种树形结构,为人们提供决策依据,决策树可以用来回答yes和no问题,它通过树形结构将各种情况组合都表示出来,每个分支表示一次选择(选择yes还是no),直到所有选择都进行完毕,最终给出正确答案。本文介绍决策树如何来实现分类,并用来预测结果。先抛出问题。现在统计了14天的气象数据(指标包括outlook,temperature,humidity,windy),并已知这些天气
2017-12-19 15:06:36
989
转载 算法仓库(二) 什么是信息增益率
为什么要提出信息增益率这种评判划分属性的方法?信息增益不是就很好吗?其实不然,用信息增益作为评判划分属性的方法其实是有一定的缺陷的,书上说,信息增益准则对那些属性的取值比较多的属性有所偏好,也就是说,采用信息增益作为判定方法,会倾向于去选择属性取值比较多的属性。那么,选择取值多的属性为什么就不好了呢?举个比较极端的例子,如果将身份证号作为一个属性,那么,其实每个人的身份证号都是不相同的,也就是说,
2017-12-18 17:40:49
1240
转载 算法仓库(一) 什么是信息增益
文章是转载的,这篇文章网络上各处转载实在太多,而且几乎所有转载都是直接复制而没进行过处理,导致其中的重要部分:数据丢了。我在查看了各个文章后,把数据部门进行了补全,希望能为自己以后保留一个记录,也希望能带给后来人一些帮助,文章末尾会标明转载的来源,虽然我也不清楚这到底是不是最终的源头。—————————————————————————————————分割线———————————
2017-12-18 15:36:19
2073
原创 工作心得(三)——初识RabbitMQ,RabbitMQ的安装和集群配置
最近被公司派去研究新技术,RabbitMQ队列服务,用来替换公司正在使用的Redis队列,至于为什么准备使用RabbitMQ而要弃用redis,这里我就不细说了,网上自己去查查资料吧,萝卜白菜各有所爱。总之,在一系列的查看资料,查文档,上谷歌求助等等,终于我封装的RabbitMQ框架就要上线生产了(预计11.15日上线,经过三轮测试),我没有使用Spring提供的rabbitmq框架,而是自己
2016-11-09 16:31:00
2934
原创 工作心得(二)——如何将Nexus本地仓库和Maven结合起来
这篇文章承接上一篇文章,接下来讲如何将Nexus本地仓库和Maven结合起来,实现maven去本地仓库中获取jar包,而不是去中央仓库;实现将自己的jar包发布到本地仓库中,本文只介绍如何搭建这样的环境,并不讲解这种环境的适用范围。----------------------------------------------------------------------------------
2016-01-16 22:07:31
2598
1
原创 工作心得(一)——如何搭建本地的maven仓库
一眨眼工作了两年多了,大概两年前我写过第一篇技术文章,是个关于easyui tree的,刚才回去翻看了一下。。。。不忍直视,我心里只有一句话:这特么是什么玩意!呵呵,相信大家也有这样的经历,工作一段时间后,再去看曾经写的代码啊,文章啊,都会吐槽自己,怎么当年写的这么垃圾。。。好了不说废话了。我在这个新公司工作了快一年了,公司用了很多技术,我最近会抽时间把这些东西一点点整理出来,在跟大家分享
2016-01-16 12:54:34
4244
原创 easyui tree 的异步加载 前台的编写方法和后台的json数据格式组装方法
这是本人第一个技术文章,首先声明,我其实是一个菜鸟 ,工作也才不到三个月,从认识java到现在也才刚刚一年。 写这篇文章呢,也主要是为了把自己的心得记录下来,也为了以后可以翻阅。 同时也希望可以分享出来与大家一起探讨。 写的不好,请轻喷,有什么不对的地方,指出来大家一起探讨一下。------------------------------------------------------
2013-11-23 18:08:20
6149
haproxy 做rabbitmq的集群负载均衡和高可用如果保持tcp长连接
2016-08-26
TA创建的收藏夹 TA关注的收藏夹
TA关注的人