- 博客(7)
- 资源 (16)
- 收藏
- 关注
原创 关于turbine集群监控与消息代理结合出错的问题
项目用到了springcloud,买了一本翟永超编著的《Spring Cloud 微服务实战》,在看到第196页到第198页,turbine集群监控与消息代理结合时,遇到了错误,虽然最后解决了,但是至今不确定是如何解决的,在此记录一下问题和解决过程。 我在windows本地正确安装了安装了rabbitmq,并且各个模块都按照你书上的说明进行配置,我陆续启动eure
2017-07-28 14:08:16 2838 1
原创 mysql主从复制(版本不一致)
mysql主从复制要求版本最好一致,至少前两个版本号相同,因为官方推荐这样,最主要还是怕版本不一致带来的不兼容问题;最近刚好在学习mysql主从复制,我已经有了两台服务器,但是mysql版本并不一致,但是既然版本不一致有可能导致不兼容,那么我就让低版本作为主master,高版本作为从slave。一台服务器为虚拟机centos7,IP地址为192.168.84.23,安装的mysql版本为5.5.5
2017-07-18 16:40:57 10194 1
原创 使用storm处理消息队列中的日志信息遇见的错误
对于系统设计者而言,日志信息具有极大的分析利用价值,这里以nginx日志access.log为例,分析它,你可以得到自己网站哪个页面访问量最多,你还可以统计访问者ip最频繁的地址以便判断是否恶意访问,总之有用信息很多。这里我才用文件读入的方法将日志信息一条条读出来放进activemq消息队列中,然后storm分析处理日志信息: 前提是linux上已安装好activemq并且启动,sto
2017-07-17 15:04:05 1479
原创 使用chukwa的自定义数据类型收集日志配置问题
chukwa是基于hadoop开发的数据采集与分析的框架,我最近在看陈康贤编著的《大型分布式网站架构设计与实践》,书中最后一章数据分析讲到如何使用chukwa收集nginx下的日志信息access.log。书中用的是自定义数据类型,自定义类型必须继承自org.apache.hadoop.chukwa.extraction.demux.processor.mapper.AbstractProcess
2017-07-14 18:00:22 468
原创 hive中建好表后,使用load命令从本地文件系统导入数据,去表中查全是null
hive中建了一张表,建表语句如下:hive>create table user( > userid bigint, > username string, > age int, > sex tinyint, > address string > )row format delimited fields terminated by '\
2017-07-12 14:36:26 14450 3
原创 hive使用mysql作为元数据库启动报错分析
hive的元数据库默认是derby,一次只能打开一个会话;若要支持多个用户同时访问,则需要选择一个独立的元数据库,常见的都选择mysql。我用的是root用户连接mysql,我已经授权所有ip都可以访问,并且flush privilegesle;没有设置密码,所以在配置文件中密码部分我直接什么都没填,但是一、1.启动日志报错如下:java.sql.SQLException: Acces
2017-07-12 13:38:46 2408 1
原创 hadoop启动没有namenode节点的错误分析
我用的是hadoop-1.0.4,伪分布式。没有为hadoop新建用户,我直接使用root启动,当输入#hadoop namenode -format后,也没什么异常,继续往下执行,输入#start-all.sh后,启动完后输入#jps发现没有namenode,立马去看日志,显示如下:2017-07-11 14:18:47,407 INFO org.apache.hadoop.hdfs
2017-07-11 17:12:27 5244
Elasticsearch学习资料整理
2018-01-12
logstash-input-jdbc-4.2.3离线安装包
2017-10-11
kafka-manager-1.3.3.13.zip
2017-08-14
报表工具Highcharts
2017-07-17
批量生成access.log的demo
2017-07-17
inotify-java-2.1.jar
2017-07-10
java开发二维码所需QRCode.jar包,附带demo
2016-03-01
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人