2014年09月_wind520

12月 11月 10月 09月 08月 07月 06月 03月 02月

原创 Elasticsearch学习

[jifeng@jifeng03 ~]$ curl 'http://jifeng04:9200/?pretty'{ "status" : 200, "name" : "Calypso", "version" : { "number" : "1.1.1", "build_hash" : "f1585f096d3f3985e73456debdc1a0745f512bbc"

2014-09-24 16:26:43 4114 1

原创 CentOS 卸载OpenJdk和Tomcat开机启动

1:查看java[zhoujifeng@gz1-cdc-01 ~]$ java -versionjava version "1.7.0_45"OpenJDK Runtime Environment (rhel-2.4.3.3.el6-x86_64 u45-b15)OpenJDK 64-Bit Server VM (build 24.45-b08, mixed mode)

2014-09-23 18:56:42 2715

转载十道海量数据处理面试题与十个方法大总结

海量数据处理：十道面试题与十个海量数据处理方法总结作者：July、youwang、yanxionglu。时间：二零一一年三月二十六日本文之总结：教你如何迅速秒杀掉：99%的海量数据处理面试题。有任何问题，欢迎随时交流、指正。出处：http://blog.csdn.net/v_JULY_v。第一部分、十道海量数据处理面试题1、海量日志数据

2014-09-21 21:47:20 763

原创 mahout贝叶斯分类器测试样例

MAHOUT 0.9版本的贝叶斯分类器测试样例测试非常简单，执行下面这条语句，然后选择第2项就OK了。[jifeng@jifeng01 hadoop]$ $MAHOUT_HOME/examples/bin/classify-20newsgroups.shPlease select a number to choose the corresponding task to run1. cn

2014-09-20 16:08:12 2611

原创开源项目托管GitHub简单使用

1：https://github.com/注册账户2：安装git

2014-09-20 11:31:21 832

转载 mysql中间件研究（Atlas，cobar，TDDL）

mysql-proxy是官方提供的mysql中间件产品可以实现负载平衡，读写分离，failover等，但其不支持大数据量的分库分表且性能较差。下面介绍几款能代替其的mysql开源中间件产品，Atlas，cobar，tddl，让我们看看它们各自有些什么优点和新特性吧。AtlasAtlas是由 Qihoo 360, Web平台部基础架构团队开发维护的一个基于MySQL协议的数据中间层项

2014-09-18 23:03:15 2403

转载 Mysql在大型网站的应用架构演变

本文主要描述在网站的不同的并发访问量级下，Mysql架构的演变。可扩展性架构的可扩展性往往和并发是息息相关，没有并发的增长，也就没有必要做高可扩展性的架构，这里对可扩展性进行简单介绍一下，常用的扩展手段有以下两种：Scale-up：纵向扩展，通过替换为更好的机器和资源来实现伸缩，提升服务能力Scale-out：横向扩展, 通过加节点（机器）来实现伸缩，提升服务能力

2014-09-18 22:33:29 891

Shuffle过程是MapReduce的核心，也被称为奇迹发生的地方。要想理解MapReduce，Shuffle是必须要了解的。我看过很多相关的资料，但每次看完都云里雾里的绕着，很难理清大致的逻辑，反而越搅越混。前段时间在做MapReduce job性能调优的工作，需要深入代码研究MapReduce的运行机制，这才对Shuffle探了个究竟。考虑到之前我在看相关资料而看不懂时很恼火，所以在这里我尽

2014-09-18 22:23:46 1208

原创 hbase shell&java 获取多版本的值

在HBase中一个row对应的相同的列只会有一行。使用scan 或get 得到都是最新的数据，如果我们对这某一row所对应的列进行了更改操作后，并不会多生成一条数据，不会像数据库一样，插入时多生成一条记录，在HBase中对同一条数据的修改或插入都只是put操作，最终看到的都是最新的数据，其它的数据在不同的version中保存，默认是隐藏的，通过时间戳区分，Hbase默认保存最近的三个版本

2014-09-17 17:00:15 19012 2

转载 spring 事务说明

在 spring 中一共定义了六种事务传播属性, 如果你觉得看起来不够直观, 那么我来转贴一个满大街都有的翻译引用l PROPAGATION_REQUIRED -- 支持当前事务，如果当前没有事务，就新建一个事务。这是最常见的选择。l PROPAGATION_SUPPORTS -- 支持当前事务，如果当前没有事务，就以非事务方式执行。l

2014-09-16 17:29:17 812

原创 phoenix 3.1 + hbase 0.94.21 的安装和使用

Apache Phoenix 是 HBase 的 SQL 驱动。Phoenix 使得 HBase 支持通过 JDBC 的方式进行访问，并将你的 SQL 查询转成 HBase 的扫描和相应的动作。兼容性：Phoenix 2.x - HBase 0.94.xPhoenix 3.x - HBase 0.94.xPhoenix 4.x - HBase 0.98.1+

2014-09-12 23:41:33 8643 1

原创 redhat 5.6 启动出现 UNEXPECTED INCONSISTENCY RUN fsck MANUALLY

昨天断电关机，今天redhat启动出现 UNEXPECTED INCONSISTENCY RUN fsck MANUALLY

2014-09-12 10:40:17 15599

翻译 Hive 0.13 数据类型

hive支持的数据类型路下数值类型 Numeric TypesTINYINT (1字节,数据范围： -128 to 127)SMALLINT (2字节,数据范围： -32,768 to 32,767)INT (4字节,数据范围：-2,147,483,648 to 2,147,483,647)BIGINT (8字节,数据范围： -9,223,372,036,854,775,808 to 9,223,372,036,854,775,807)FLOAT (4字节, 单精度浮点数)DOUBLE (8字

2014-09-11 19:55:34 16565

原创 hive加载大文件(3G)

1：上传文件到hadoop

2014-09-11 18:47:28 2199

原创 hive中删除表的错误Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask. MetaException

hive中删除表的错误Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask. MetaExceptionFAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask. MetaException(message:javax.jdo.JDODataStoreException: Iteration request failed :

2014-09-09 23:51:30 34121 4

转载 Hadoop Pig学习笔记各种SQL在PIG中实现

我这里以Mysql 5.1.x为例,Pig的版本是0.8 同时我将数据放在了两个文件,存放在/tmp/data_file_1和/tmp/data_file_2中.文件内容如下: tmp_file_1:Txt代码 zhangsan 23 1 lisi 24 1 wangmazi 30 1 meinv

2014-09-09 09:15:56 1049

原创 sqoop 1.4.5 导入 hbase 0.94.21

[jifeng@jifeng02 sqoop]$ bin/sqoop import --connect jdbc:mysql://10.x.x.x:3306/lir --username dss --password abc123 --table bb_month --hbase-table bb_month --hbase-create-table --hbase-row-key ID --

2014-09-08 21:36:06 2852

原创 sqoop 1.4.5 增量导入hive 0.12.0

导入命令bin/sqoop import --connect jdbc:mysql://10.6.X.X:3306/lir --username dss --password abc123 --table bb_month --hive-import -m 100bin/sqoop import --connect jdbc:mysql://10.X.X.X:3306/lir --tabl

2014-09-08 21:03:03 7358

原创 sqoop1.4.5 导入 hive IOException running import job: java.io.IOException: Hive exited with status 1

sqoop 导入 hivehive.HiveImport: Exception in thread "main" java.lang.NoSuchMethodError: org.apache.thrift.EncodingUtils.setBit(BIZ)BERROR tool.ImportTool: Encountered IOException running import

2014-09-08 02:11:25 21316

原创 ERROR Streaming result set com.mysql.jdbc.RowDataDynamic@1d5a7f6 is still active. No statements may

[jifeng@jifeng02 sqoop]$ bin/sqoop import --connect jdbc:mysql://10.X.X.X:3306/lir --username dss --password 123123 --table bb_month --hive-import -m 100Warning: /home/jifeng/sqoop/../hcatalog does n

2014-09-08 01:37:37 11452 3

原创 WARNING : There are about 34 missing blocks. Please check the log or run fsck.

'jifeng01:9000'Started:Sat Sep 06 22:41:47 CST 2014Version:1.2.1, 1503152Compiled:Mon Jul 22 15:23:09 PDT 2013 by mattfBrowse the filesystem jifeng01:9000 Log

2014-09-06 23:06:04 6891

原创 MongoDB 2.6.4 主从同步

1：启动master[jifeng@jifeng04 mongodb-linux-x86_64-2.6.4]$ mkdir log[jifeng@jifeng04 mongodb-linux-x86_64-2.6.4]$ mongod -dbpath /home/jifeng/mongodb-linux-x86_64-2.6.4/data --port 10000 --master --re

2014-09-05 15:31:48 4474

转载 Mysql 主从数据库同步详解

目录一、环境说明 ........................................................................................................................... 1 二、同步方式 ...................................................

2014-09-03 17:49:27 857

转载 MAVEN常用命令

Maven库：http://repo2.maven.org/maven2/Maven依赖查询：http://mvnrepository.com/Maven常用命令： 1. 创建Maven的普通java项目： mvn archetype:create -DgroupId=packageName -DartifactId=project

2014-09-03 15:01:10 618

原创 Red Hat Enterprise Linux Server release 5.6 安装 MongoDB 2.6.4

1:下载[jifeng@jifeng04 ~]$ wget http://downloads.mongodb.org/linux/mongodb-linux-x86_64-2.6.4.tgz--2014-09-03 12:39:31-- http://downloads.mongodb.org/linux/mongodb-linux-x86_64-2.6.4.tgz正在解析主机 down

2014-09-03 14:30:51 2240

hadoop native

hadoop 64位编译后的成果，native目录 libhadoop.a libhadoop.so libhadoop.so.1.0.0 libhadooppipes.a libhadooputils.a libhdfs.a libhdfs.so libhdfs.so.0.0.0

2014-08-03

hadoop-2.4.1-src

hadoop-2.4.1-src代码，编译必备

2014-08-01

apache-ant-1.9.4

apache-ant-1.9.4，hadoop-2.4.1编译需要

2014-08-01

protobuf-2.5.0.tar.gz

protobuf-2.5.0.tar.gz ,编译hadoop2.4.1需要的

2014-08-01

openerp-7.0

OpenERP是欧洲开发的一款开源ERP软件，OpenERP发展的初衷是为了提供SAP、Microsoft Dynamics等商业ERP软件的开源替代产品。它使用Python语言开发，数据库采用开源的PostgreSQL，系统以GNU GPL开源协议发布。 OpenERP作为跨平台的应用系统，支持在Windows、Linux等多种操作系统上运行，还支持通过Andriod、iPhone等手机移动终端接入访问

2014-07-30

postgresql-9.1.14-1-1

PostgreSQL主要优势：　　1. PostgreSQL完全免费，而且是BSD协议，如果你把PostgreSQL改一改，然后再拿去卖钱，也没有人管你，这一点很重要，这表明了PostgreSQL数据库不会被其它公司控制。oracle数据库不用说了，是商业数据库，不开放。而MySQL数据库虽然是开源的，但现在随着SUN被oracle公司收购，现在基本上被oracle公司控制，其实在SUN被收购之前，MySQL中最重要的InnoDB引擎也是被oracle公司控制的，而在MySQL中很多重要的数据都是放在InnoDB引擎中的，反正我们公司都是这样的。所以如果MySQL的市场范围与oracle数据库的市场范围冲突时，oracle公司必定会牺牲MySQL，这是毫无疑问的。　　2. 与PostgreSQl配合的开源软件很多，有很多分布式集群软件，如pgpool、pgcluster、slony、plploxy等等，很容易做读写分离、负载均衡、数据水平拆分等方案，而这在MySQL下则比较困难。 3. PostgreSQL源代码写的很清晰，易读性比MySQL强太多了，怀疑MySQL的源代码被混淆过。所以很多公司都是基本PostgreSQL做二次开发的。 4. PostgreSQL在很多方面都比MySQL强，如复杂SQL的执行、存储过程、触发器、索引。同时PostgreSQL是多进程的，而MySQL是线程的，虽然并发不高时，MySQL处理速度快，但当并发高的时候，对于现在多核的单台机器上，MySQL的总体处理性能不如PostgreSQL，原因是MySQL的线程无法充分利用CPU的能力。

2014-07-30

ImageMagick

ImageMagick是一套功能强大、稳定而且开源的工具集和开发包，可以用来读、写和处理超过89种基本格式的图片文件，包括流行的TIFF、JPEG、GIF、 PNG、PDF以及PhotoCD等格式。利用ImageMagick，你可以根据web应用程序的需要动态生成图片, 还可以对一个（或一组）图片进行改变大小、旋转、锐化、减色或增加特效等操作，并将操作的结果以相同格式或其它格式保存，对图片的操作，即可以通过命令行进行，也可以用C/C++、Perl、Java、PHP、Python或Ruby编程来完成。同时ImageMagick提供了一个高质量的2D工具包，部分支持SVG。现在，ImageMagi

2014-02-17

railsinstaller-2.2.1

redmine的运行环境rails,ruby

2014-02-17

rmagick-2.13.1-x86-mingw32.gem

redmine的一个包文件，可以用来导出为pdf，图像的功能

2014-02-17

redmine-2.4.3

目前最新版，Redmine是用Ruby开发的基于web的项目管理软件，是用ROR框架开发的一套跨平台项目管理系统，据说是源于Basecamp的ror版而来，支持多种数据库，有不少自己独特的功能，例如提供wiki、新闻台等，还可以集成其他版本管理系统和BUG跟踪系统，例如Perforce、SVN、CVS、TD等等。这种 Web 形式的项目管理系统通过“项目（Project）”的形式把成员、任务（问题）、文档、讨论以及各种形式的资源组织在一起，大家参与更新任务、文档等内容来推动项目的进度，同时系统利用时间线索和各种动态的报表形式来自动给成员汇报项目进度。

2014-02-14

redmine-1.3.3

redmine1.3.3版本，非常好用的项目管理工具

2014-02-14

rubyinstaller-1.8.7-p358

ruby1.8.7安装包，安装redmine1.3.x需要的环境支撑

2014-02-14

subclipse-1.8.22

Subclipse 1.8.x includes and requires Subversion 1.7.x client features and working copy format.

2013-09-04

hadoop-eclipse-plugin-1.1.2

hadoop-eclipse-plugin-1.1.2.jar

2013-07-19

eclipse3.6+hadoop-0.21.0插件配置使用

2013-07-03

hadoop-1.1.2 源代码

Hadoop 是一个分布式系统基础架构，由Apache基金会开发。用户可以在不了解分布式底层细节的情况下，开发分布式程序。充分利用集群的威力高速运算和存储。Hadoop实现了一个分布式文件系统（Hadoop Distributed File System），简称HDFS。HDFS有着高容错性的特点，并且设计用来部署在低廉的（low-cost）硬件上。而且它提供高传输率（high throughput）来访问应用程序的数据，适合那些有着超大数据集（large data set）的应用程序。HDFS放宽了（relax）POSIX的要求（requirements）这样可以流的形式访问（streaming access）文件系统中的数据。

2013-07-03

hadoop-1.1.2.tar

hadoop稳定版本-1.1.2 Hadoop 是一个分布式系统基础架构，由Apache基金会开发。用户可以在不了解分布式底层细节的情况下，开发分布式程序。充分利用集群的威力高速运算和存储。Hadoop实现了一个分布式文件系统（Hadoop Distributed File System），简称HDFS。HDFS有着高容错性的特点，并且设计用来部署在低廉的（low-cost）硬件上。而且它提供高传输率（high throughput）来访问应用程序的数据，适合那些有着超大数据集（large data set）的应用程序。HDFS放宽了（relax）POSIX的要求（requirements）这样可以流的形式访问（streaming access）文件系统中的数据

2013-07-03

jackson-all-1.9.11.jar

Spring MVC 3.0 返回JSON数据用到的库

2013-06-30

druid-0.2.20

druid-0.2.20.jar Druid首先是一个数据库连接池。Druid是目前最好的数据库连接池，在功能、性能、扩展性方面，都超过其他数据库连接池，包括DBCP、C3P0、BoneCP、Proxool、JBoss DataSource。 Druid已经在阿里巴巴部署了超过600个应用，经过一年多生产环境大规模部署的严苛考验。同时Druid不仅仅是一个数据库连接池，它包括四个部分： Druid是一个JDBC组件，它包括三个部分：基于Filter－Chain模式的插件体系。 DruidDataSource 高效可管理的数据库连接池。 SQLParser

2013-06-29

ActivePerl-5.6.1.635-MSWin32-x86.msi

Symbian OS S60开发必备 ActivePerl-5.6.1.635-MSWin32-x86.msi

2010-01-19

mp3play 用Dx实现的mp3播放和lrc歌词显示

mp3play 用Dx实现的mp3播放和lrc歌词显示等

2009-01-08

AutoCHM：CHM生成和还原Html工具

2009-01-08

QuickServer1.4.7.exe

java开源通讯包，QuickServer1.4.7.exe

2008-08-29

slf4j-1.4.3 log日志包

slf4j-1.4.3 java开源log日志包

2008-08-29

mina-1.1.7.zip

java开源通讯包mina-1.1.7.zip

2008-08-29

xscocket2.1

java开源通讯包xscocket2.1

2008-08-29

java ,c#,delphi 解决flash安全沙箱问题

java ,c#,delphi 解决flash安全沙箱问题聊天室

2008-08-28

四人麻将游戏j2me开发

四人麻将游戏j2me开发 nokia s40 手机测试通过

2008-08-26

用Socket 打造跨语言跨操作系统的网络MORPG游戏

Flex 客户端代码 FLEX3 开发 DelphiServer Delphi6 开发的服务端 Server java 开发的服务端 CServer C# 开发的服务端

2008-08-03

FLEX+Delphi,FLEX+Java，FLEX+C# 的聊天室

客户端说明 chat.mxml socket.connect("127.0.0.1",8888); 设置服务端IP和端口 ----------------------------- chat 客户端代码 FLEX3 开发 ChatServer Delphi6 开发的服务端 Server java 开发的服务端 WindowsApplication1 C# 开发的服务端 其实可以做到FLEX+Delphi,FLEX+Java,FLEX+C#,FLEX+C++ 把swf放到网站上去，会出现安全沙箱问题没有解决，如果你解决了请告诉我(email:feng0904@163.com)，谢谢

2008-07-18

FLEX+Delphi,FLEX+Java 的聊天室

chat 客户端代码 FLEX3 开发 ChatServer Delphi6 开发的服务端 Server java 开发的服务端 其实可以做到FLEX+Delphi,FLEX+Java,FLEX+C#,FLEX+C++ 把swf放到网站上去，会出现安全沙箱问题没有解决，如果你解决了请告诉我(季风,email:feng0904@163.com)，谢谢

2008-07-18

中国诗词风

中国诗词风介绍：中国诗词是泛指中华文化中的“诗、词、曲、歌、赋”。本软件收集了中国历代“诗、词、曲、歌、赋”等各类优秀作品共约5202首，在浩瀚的中华历史文化中，这仅仅是沧海一粟。软件收集的诗词歌赋及注释简析、以及诗词作者生平简介上，摘录、全部来自网上。所有收录的诗词曲歌赋作品的版权，均归原著作权人所有。若您发现本软件里收录的作品侵犯了您的版权，请您e-mail告知，我们会及时删除相关作品。使用： 1：查找：首先选择--查找方案1或查找方案2；然后 1)查找方案1，输入作者名或作者的作品,你也可以只输入作者名或作者作品的一个或者几个连续的字，然后看你是否需要作者名或作者的作品同时存在，最后点确定就OK了。 2)查找方案2：输入作品中的一句或二句诗词,你也可以只输入一句或二句诗词中的一个或者几个连续的字.如你只记得一首诗中的（故人西辞黄鹤楼，烟花三月下扬州）？？？黄鹤楼，？？？下扬州，你就可以在诗词句子的第一个空填黄鹤楼，第二个空填下扬州，然后看你是否需要作者名或作者的作品同时存在，最后点确定就OK了，你也可以只在诗词句子的第一个空填黄鹤楼，也可以的，然后再点确定。 2：添加诗词，点添加诗词后，你可以在显示诗词和显示注释的编辑框中添加诗词，注释，然后点添加诗词这个按钮（这时它已变成保存诗词了），填好朝代，作者，作品名再点确定。 3：修改诗词，点修改诗词后，你可以在显示诗词和显示注释的编辑框中修改诗词，注释，然后点修改诗词这个按钮（这时它已变成保存诗词了），填好朝代，作者，作品名再点确定。 4：你添加的诗词要是在树形列表中没有相对应的作者，你必须添加作者信息（诗词---添加作者信息），在你下次使用本软件时，你会在树形列表中看到添加的作者。谢谢你使用本软件。作者主页：http://cn.geocities.com/jifeng1028/ http://520abc520.51.net E-mail:feng0904@163.com

2006-03-16

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人