2017年04月_星宫社

12月 10月 09月 08月 07月 06月 05月 04月 03月 02月 01月

原创 kettle 7.0导数据hbase1.2.7 （测试）

Get started0、官网教程 http://wiki.pentaho.com/display/BAD/Loading+Data+into+HBase1、kettle连接hadoop问题 kettle有对应的hadoop版本，kettle 7.0默认是对应的hadoop2.4。可以在data-integration\plugins\pentaho-big-data

2017-04-25 20:06:09 5948 1

原创 Hadoop 相关

1、hadoop单机安装参照官网 2、hbase单机安装（参考：测试环境cent os ）参照官网，文件系统有本地和hdfs两种，本地安装的话，直接按照官网就可以了。如果底层使用hdfs，那么要先安装hadoop，然后在配置hadoop的地址到hbase。（两者分开安装要注意，hadoop中配置namenode时候要配置ip而不是localhost，否则hbase会访问不到），然后

2017-04-18 09:20:04 533

PhoenixHbase查询工具，提供在hbase中sql方式查询。提供了很多sql语法，二级索引等传统数据库支持的功能。新版本中有支持transaction（beta）。官网http://phoenix.apache.org/Phoenix-in-15-minutes-or-less.html、二进制文件下载http://mirror.bit.edu.cn/apache/phoenix/apache-phoenix-4.9.0-HBase-1.2/bin/部署安装http://www.zh

2017-04-17 18:05:02 2786

原创 Java读Excel文件

如果用XSSFWorkbook 来读取excel，遇到文件太大时候，会导致oom， OutOfMemoryError: Java heap space所以apache官网上有推荐 If memory footprint is an issue, then for XSSF, you can get at the underlying XML data, and process it yo

2017-04-13 18:47:13 1043

原创 mysql导入excel数据乱码问题

prerequisite1、确保mysql字符集设置为utf82、先建表在导入比较好。确保每个字段的字符集设置正确。3、导入的数据源，excel字符集也确保为统一字符集check导入数据后突然发现导入的数据变成了乱码，我的情况是，导入的数据中中文都变沉了？？？问号参考这篇文章中的检查方式：http://blog.csdn.net/ACMAIN_CHM/article/d

2017-04-13 08:58:54 1650

solr-cloud-5.3.0 window7伪集群搭建

windows环境 1.伪集群，将压缩包解压后放在以下目录中(任意盘，此处是E:) ：E:\solr\solr-5.3.0-cloud 2.修改 solr_home1\bin\solr.in.cmd中的SOLR_HOST 3.运行build脚本

2018-09-11

hadoop&hbase;高可用测试环境搭建

hadoop&hbase;高可用测试环境搭建，包含搭建脚本和搭建步骤。请详细参见搭建步骤后在使用脚本

2018-09-11

根据java文件动态生成Mysql表.rar

通过java的动态编译加载技术，根据java文件动态生成Mysql表创建语句，并且在mysql数据库中创建表

2018-07-16

Apache Solr High Performance.pdf&Solr;+In+Action+2013.pdf英文版

两本电子书，都是英文版本的。所以看清楚在下载。准备个字典

2018-06-25

Spark相关数据

Spark大数据处理技术、应用与性能优化.pdf Spark大数据分析实战.pdf Spark快速大数据分析.pdf 自己动手做大数据系统.pdf

2018-05-30

java加密算法分析

加密加密算法调研以及加密算法代码实现，其中包括rsa、des、hash等算法

2018-04-23

java图片爬虫

通过开源项目crawl4j执行图片爬虫，通过excel文件指定url，build.bat自动打包脚本

2017-08-16

hdfs2-7_3+hbase1_2_5 HA withQJM环境搭建

hadoopHA with QJM环境搭建（hdfs+hbase）

2017-04-05

jd-core-java

github https://github.com/nviennot/jd-core-java JD-Core-java is a thin-wrapper for the Java Decompiler. This is hack around the IntelliJ IDE plugin. It fakes the interfaces of the IDE, and provides access to JD-Core. Since the Author of JD-Core is not willing to provide a library, and we all want to batch decompilation, this is pretty much our only option. I hope this will motivate the author to release a proper library.

2017-03-24

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

急速虫子