- 博客(8)
- 资源 (1)
- 收藏
- 关注
原创 windows系统下maven安装及eclipse配置maven插件
1、maven安装配置 1)到官网下载maven 3.2.2 https://archive.apache.org/dist/maven/maven-3/ 2)安装到 D:\ 3)配置环境变量: 系统属性->高级系统设置->环境变量->系统变量->在里面新建一个MAVEN,然后输入maven的安装路径->Path里面添加%MAVEN%\bin; 4)核实maven是否配
2016-08-03 17:18:37 6219
原创 Java 读取system.properties文件
1、java读取system.properties文件,需要注意的是:读取配置文件的java代码最好应该和配置文件在同一个文件夹下面! 2、测试读取配置文件代码 package some.company.com; import java.io.IOException; import java.io.InputStream; import java.util.Propert
2016-08-03 17:14:16 1655
原创 Storm UI界面上出现的Spout Failed 问题解决方案!!!
这个问题比较麻烦!定位了很久(至少花了我10天左右的时间)才解决此问题! 出现此问题的原因是: spout在默认超时时间(30s)内发射出去的Tuple没有被bolt处理就会出现spout failed。 尝试解决问题的过程: 1、调整bolt的worker、executor、task数目,希望能够解决问题。结果失败! 2、调整修改默认超时时间(topology.me
2016-08-03 17:11:31 3931
原创 关于storm程序运行起来“java.lang.OutOfMemoryError: unable to create new thread解决方案
问题:storm程序运行起来,发现提示不能创建更多的线程!自己查看服务器的内存(free -g)和cpu 利用率(top)及磁盘剩余空间(df -h),发现还有许多可用资源,于是怀疑(多半是)系统默认创建进程数(1024个)(ulimit -a)限定所致! 1、系统RedHat 2、修改/etc/security/limits.conf文件 3、接着修改/etc/secur
2016-08-03 17:05:09 2727
原创 Hadoop2.x + eclipse 插件配置
搭建集群那些就不用说了,主要有几个关键的地方需要注意(自己的Hadoop版本是2.5.2)。 0、插件hadoop-eclipse-plugin-2.5.2。自己去github或则什么地方下载,然后在自己电脑上编译好(我用的是Ant),编译好后放在eclipse安装目录的plugins目录下! 1、mapred-site.xml 增加以下内容:
2016-08-03 17:01:21 1092
原创 不同集群之间Hbase数据备份
目的:从10.102.2.246上把Hbase里面数据备份到10.101.159.62的Hbase里面,并且这两台机器之间无法通信,因此采用最笨的办法解决问题。 步骤: 1、从246上把Hbase里面数据先拷贝到该节点的一个目录,拷贝到/oracle/hpdata/hbase-data.bak。我们知道由于配置文件hbase-site.xml里面写的hbase数据存放地方是hdfs:/
2016-08-03 16:57:41 927
原创 win7 64位安装scikit-learn机器学习库
1、环境:windows 7 64位操作系统+Python2.7.11(64位) 2、要使用scikit learn机器学习库要首先安装numpy、scipy、matplotlib 3、下载numpy、scipy、scikit-learn机器学习库 下载numpy64位地址: http://www.lfd.uci.edu/~gohlke/pythonlibs/#numpy 下载Scipy64位:
2016-08-03 13:19:02 1483
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人