怎样压缩不以文件为基础的数据(copy 来的)

原创 2001年12月17日 11:43:00

12月7日, 2002

 Q: 本周,我回答了两个使用Java进行数据压缩的问题.

第一个问题是: 我怎样才能压缩那些不在文件中的数据.

第二个问题是: 我以极大的热情阅读了Todd Sundsted的"压缩你的数据,从而提高你的网络应用程序的性能",但是读完后我却有点失望.当我读到文章标题时我很高兴.我想我总算找到了解决问题的办法了.

    在我们的公司,我们试图提高一个组织数据的RMI应用程序的性能.服务器端进行了绝大部分的处理和优化.我们花了一年半的时间去提高性能,但是现在看来瓶颈在于数据的传输上.在一天的任何时间内,我们都有可能在客户和服务器之间传送成千上万的数据.

      一种可能的解决办法,我建议我们能够在把数据返回给客户端时先压缩这些数据,这在Todd的文章中已经说得很清楚了.但是,文章中的例子却是压缩文件,而不是我们所需要的----对数据进行压缩.

    在RMI中的实现中,我们先从数据库取得数据,再把数据放入一个列表中,接着把这个列表返回给客户端,最后再把它们插入JTable中.我想在把数据返回给客户时,首先把列表中的数据压缩,然后在客户端解压缩,最后把数据插入到表格中.

这样的想法可行吗?

A:最近我收到了一些关于Todd的文章的疑问.很多读者看起来对文章中的举例很疑惑.因为文章中的例子是以文件压缩为核心的.

   首先回答第一个问题,当你使用ZipInputStream 和 ZipOutputStream 并没有强制你必须使用文件.唯一要注意的是你必须把数据转换为字节数组的形式.

  第二个问题比较棘手.在网络中,以RMI方式通信就需要作一些调整了.为了在传送数据之前就让RMI进行数据压缩,你必须创建一个能够压缩数据的新的套接字.然后,当你创建了一个套接字后,你得告诉RMI使用这一套接字.

  以下是创建一个RMI形式的套接字的简要步骤:

  1:选择或者创建一个新的套接字.(可以参看SUN'S的"创建一个典型的套接字").

  2:创建一个服务器端的套接字.

  3:创建一个RMIClientSocketFactory

  4:创建一个RMIServerSocketFactory

  5:创建一个继承了UnicastRemoteObjec的远程对象,从而使用新的factories.

  根据这一大致的想法,我们来看每一步如何具体的实现.

 步骤1: 创建ZipSocket

由于要进行Zip压缩,我们重新创建这样的套接字

mport java.io.InputStream;

import java.io.OutputStream;

import java.util.zip.ZipInputStream;

import java.util.zip.ZipOutputStream;

import java.net.Socket;

public class ZipSocket extends Socket {

 <?xml:namespace prefix = o ns = "urn:schemas-microsoft-com:office:office" />

    private InputStream in;

    private OutputStream out;

   

    public ZipSocket() { super(); }

 

    public ZipSocket(String host, int port)

        throws IOException {

            super(host, port);

    }

   

    public InputStream getInputStream()

        throws IOException {

            if (in == null) {

                in = new ZipInputStream(super.getInputStream());

            }

       return in;

    }

 

    public OutputStream getOutputStream()

        throws IOException {

            if (out == null) {

                out = new ZipOutputStream(super.getOutputStream());

            }

            return out;

    }

   

    public synchronized void close() throws IOException {

        OutputStream o = getOutputStream();

        o.flush();

        super.close();

    }

}

 

 

步骤2: 创建ZipServerSocket

 

import java.net.ServerSocket;

import java.net.Socket;

import java.io.IOException;

 

public class ZipServerSocket extends ServerSocket

{

  public ZipServerSocket(int port) throws IOException {   

    super(port);

  }

 

  public Socket accept() throws IOException {

    Socket socket = new ZipSocket();

    implAccept(socket);

    return socket;

  }

}

 

 

步骤3:创建ZipClientSocketFactory

客户端的factory的创建必须遵循以下的形式:

 

import java.io.IOException;

import java.io.Serializable;

import java.net.Socket;

import java.rmi.server.RMIClientSocketFactory;

 

public class ZipClientSocketFactory

    implements RMIClientSocketFactory, Serializable {

    public Socket createSocket(String host, int port)

        throws IOException {

            ZipSocket socket = new ZipSocket(host, port);

            return socket;

    }

}

 

步骤4:创建ZipServerSocketFactory

 

import java.io.IOException;

import java.io.Serializable;

import java.net.ServerSocket;

import java.rmi.server.RMIServerSocketFactory;

 

public class ZipServerSocketFactory

    implements RMIServerSocketFactory, Serializable {

 

    public ServerSocket createServerSocket(int port)

        throws IOException {

            ZipServerSocket server = new ZipServerSocket(port);

            return server;

    }

}

 

步骤5: 创建一个继承了UnicastRemoteObjec的远程对象,从而使用新的factories.

public class YourRMIObject extends UnicastRemoteObject {

 

public YourRemoteObject( int port ) {

super( port, new ZipClientSocketFactory(), new ZipServerSocketFactory() );

}

 

// 剩下的是你自己的程序实现

 

}

 

现在你的通信数据得到了压缩.

 

 

关于作者:

Tony Sintes 是一个独立咨询人,同时也是First Class Consulting, Inc. 的创始人.这一咨询公司主要致力与对各个不同的企业系统进行量身定制和培训 . 业余时间,Tony 是一个积极的自由作家,同时也是Sams出版的<<21天学通面向对象编程>>的作者 (Sams, 2001; ISBN: 0672321092).

 

资源:

To download the source code that accompanies this article, go to:

http://www.javaworld.com/javaworld/javaqa/2001-12/ziprmi/01-qa-1207-ziprmi.zip

 

"Zip Your Data and Improve the Performance of Your Network-Based Applications," Todd Sundsted (JavaWorld, November 1998):

http://www.javaworld.com/javaworld/jw-11-1998/jw-11-howto.html

 

"Creating a Custom RMI Socket Factory," (Sun Microsystems, 1999):

http://java.sun.com/products/jdk/1.2/docs/guide/rmi/rmisocketfactory.doc.html

 

"Creating a Custom Socket Type," (Sun Microsystems, 1999):

http://java.sun.com/products/jdk/1.2/docs/guide/rmi/sockettype.doc.html

 

Be sure to check out Tony's suggested reading list at:

http://www.firstclassconsulting.net/reading.html

 

For more RMI stories, visit the RMI / RMI-IIOP section of JavaWorld's Topical Index:

http://www.javaworld.com/channel_content/jw-rmi-index.shtml

 

Want more? See the Java Q&A Index for the full Q&A catalog:

http://www.javaworld.com/columns/jw-qna-index.shtml

 

For over 100 insightful Java tips from some of the best minds in the business, visit JavaWorld's Java Tips Index:

http://www.javaworld.com/columns/jw-tips-index.shtml

 

Learn the basics of client-side Java in our Java Beginner discussion. Core topics include the Java language, the Java Virtual Machine, APIs, and development tools:

http://forums.idg.net/webx?50@@.ee6b804

 

Sign up for JavaWorld's free Applied Java newsletter:

http://www.idg.net/jw-subscribe

 

You'll find a wealth of IT-related articles from our sister publications at IDG.net

译者:我觉得这篇文章很有实用性,并且告诉了我们一种在网络通信时进行数据压缩的一个可行的解决办法.所以把它翻译出来,希望大家都能学到这一方法.这篇文章翻译起来比较简单.但是由于水平有限,如果不对的地方恳请大家指正. bootcool@263.net.

GZIP数据格式讲解

背景: 协议解析时,碰到二进制数据,有些内容可以识别的,比如说带着特征1F8B08:代表着gzip数据出现了故想了解下gzip是怎么回事! From:http://www.tuicool.com/...
  • u013427969
  • u013427969
  • 2016年10月15日 21:58
  • 1021

文件不以%PDF格式打开

birt报表格式输出时如果出现该问题“文件不以%PDF格式打开”可能出现的问题是:1.jsp传入的参数与报表页面参数不匹配,导致该问题。2.报表页面的字符集出现解析问题,可能出现该问题。...
  • snowyz
  • snowyz
  • 2010年11月01日 17:15
  • 4230

文件不以%PDF-开始 解决方案

文件不以%PDF-开始  解决方案 1、打开Adobe Reader  ,点击【编辑】,选择 【首选项】 2、选择【因特网】 默认 1) 在浏览器中 显示PDF(D)  2) 允许快速Web查...
  • xiaokuang513204
  • xiaokuang513204
  • 2011年09月15日 16:07
  • 13973

文件不以'%PDF—开始'之解决方法

问题:一同事拿内嵌PDF文档的网页让我打开时,提示“文件不以'%PDF—开始'”,我的电脑有安装adobe acrobat 7.0,没有安装reader,试试其它安装reader 5.0/6.0的电脑...
  • u014461454
  • u014461454
  • 2014年03月31日 17:41
  • 3850

哈弗曼编码实现文件压缩和解压缩

原理哈弗曼编码的本质是将文件中出现频率越高的字符用越短的二进制码代替从而达到节省空间的目的。为了达到这个目的,需要构建哈夫曼树。 哈弗曼树的构建过程为: 1. 将源文件所有字符及其出现次数构建哈...
  • ylbs110
  • ylbs110
  • 2016年06月05日 17:29
  • 1023

音视频数据压缩及编解码基础

音视频数据压缩及编解码基础 转自:http://mp.weixin.qq.com/s/CI_zZJABqCNLkdq2Rjz53Q?ref=myread 音视频压缩技术是编解码中难点,常常...
  • yueguanyun
  • yueguanyun
  • 2017年03月07日 15:10
  • 1078

过客--期货业协会这个傻逼网站报个名一直报不上提示“基础数据为空”

期货也协会这个傻逼网站一开始登录就不好登录 好不容易登录进去了报名填写完基础信息点击下一步就一直提示“基础数据为空”,回头检查了一下信息,都填写了呀,没啥问题呀 就是一直报下面这个错,而且报考批次也不...
  • jianglai3289
  • jianglai3289
  • 2016年08月30日 02:58
  • 15494

把数据量大导出 放入多个excel 然后压缩成zip文件,导出

前台页面: 开户开始日期 开户结束日期 营业部名称 客户归属系统 ...
  • u012608167
  • u012608167
  • 2017年03月21日 17:00
  • 708

用C++实现文件压缩

乍一听,这个文件压缩的名字貌似是很高大上的,其实,在数据结构中学完Huffman树之后,就可以理解这个东西其实不是那么的高不可攀。 文件压缩 所谓文件压缩,其实就是将对应的字符编码转换为另一种占据字...
  • qq_33724710
  • qq_33724710
  • 2016年08月15日 00:28
  • 3309

利用mmap实现文件拷贝

(写于November 14th, 2013)    今天根据老师的介绍试着使用mmap函数来实现拷贝文件,确实速度比read和write实现的要快很多。 首先介绍一下mmap函数: ...
  • vmezr
  • vmezr
  • 2013年11月24日 20:27
  • 2114
内容举报
返回顶部
收藏助手
不良信息举报
您举报文章:怎样压缩不以文件为基础的数据(copy 来的)
举报原因:
原因补充:

(最多只允许输入30个字)