sooket数据成传输压缩

样压缩不以文件为基础的数据

Q: 回答了两个使用Java进行数据压缩的问题.

第一个问题是: 我怎样才能压缩那些不在文件中的数据.

第二个问题是: 我以极大的热情阅读了Todd Sundsted的"压缩你的数据,从而提高你的网络应用程序的性能",但是读完后我却有点失望.当我读到文章标题时我很高兴.我想我总算找到了解决问题的办法了.

在我们的公司,我们试图提高一个组织数据的RMI应用程序的性能.服务器端进行了绝大部分的处理和优化.我们花了一年半的时间去提高性能,但是现在看来瓶颈在于数据的传输上.在一天的任何时间内,我们都有可能在客户和服务器之间传送成千上万的数据.

一种可能的解决办法,我建议我们能够在把数据返回给客户端时先压缩这些数据,这在Todd的文章中已经说得很清楚了.但是,文章中的例子却是压缩文件,而不是我们所需要的----对数据进行压缩.

在RMI中的实现中,我们先从数据库取得数据,再把数据放入一个列表中,接着把这个列表返回给客户端,最后再把它们插入JTable中.我想在把数据返回给客户时,首先把列表中的数据压缩,然后在客户端解压缩,最后把数据插入到表格中.

这样的想法可行吗?

A:最近我收到了一些关于Todd的文章的疑问.很多读者看起来对文章中的举例很疑惑.因为文章中的例子是以文件压缩为核心的.

首先回答第一个问题,当你使用ZipInputStream 和 ZipOutputStream 并没有强制你必须使用文件.唯一要注意的是你必须把数据转换为字节数组的形式.

第二个问题比较棘手.在网络中,以RMI方式通信就需要作一些调整了.为了在传送数据之前就让RMI进行数据压缩,你必须创建一个能够压缩数据的新的套接字.然后,当你创建了一个套接字后,你得告诉RMI使用这一套接字.

以下是创建一个RMI形式的套接字的简要步骤:

1:选择或者创建一个新的套接字.(可以参看SUNS的"创建一个典型的套接字").

2:创建一个服务器端的套接字.

3:创建一个RMIClientSocketFactory

4:创建一个RMIServerSocketFactory

5:创建一个继承了UnicastRemoteObjec的远程对象,从而使用新的factories.

根据这一大致的想法,我们来看每一步如何具体的实现.

步骤1: 创建ZipSocket

由于要进行Zip压缩,我们重新创建这样的套接字

mport java.io.InputStream;

import java.io.OutputStream;

import java.util.zip.ZipInputStream;

import java.util.zip.ZipOutputStream;

import java.net.Socket;

public class ZipSocket extends Socket {

private InputStream in;

private OutputStream out;

public ZipSocket() { super(); }

public ZipSocket(String host, int port)

throws IOException {

super(host, port);

}

public InputStream getInputStream()

throws IOException {

if (in == null) {

in = new ZipInputStream(super.getInputStream());

}

return in;

}

public OutputStream getOutputStream()

throws IOException {

if (out == null) {

out = new ZipOutputStream(super.getOutputStream());

}

return out;

}

public synchronized void close() throws IOException {

OutputStream o = getOutputStream();

o.flush();

super.close();

}

}

步骤2: 创建ZipServerSocket

import java.net.ServerSocket;

import java.net.Socket;

import java.io.IOException;

public class ZipServerSocket extends ServerSocket

{

public ZipServerSocket(int port) throws IOException {

super(port);

}

public Socket accept() throws IOException {

Socket socket = new ZipSocket();

implAccept(socket);

return socket;

}

}

步骤3:创建ZipClientSocketFactory

客户端的factory的创建必须遵循以下的形式:

import java.io.IOException;

import java.io.Serializable;

import java.net.Socket;

import java.rmi.server.RMIClientSocketFactory;

public class ZipClientSocketFactory

implements RMIClientSocketFactory, Serializable {

public Socket createSocket(String host, int port)

throws IOException {

ZipSocket socket = new ZipSocket(host, port);

return socket;

}

}

步骤4:创建ZipServerSocketFactory

import java.io.IOException;

import java.io.Serializable;

import java.net.ServerSocket;

import java.rmi.server.RMIServerSocketFactory;

public class ZipServerSocketFactory

implements RMIServerSocketFactory, Serializable {

public ServerSocket createServerSocket(int port)

throws IOException {

ZipServerSocket server = new ZipServerSocket(port);

return server;

}

}

步骤5: 创建一个继承了UnicastRemoteObjec的远程对象,从而使用新的factories.

public class YourRMIObject extends UnicastRemoteObject {

public YourRemoteObject( int port ) {

super( port, new ZipClientSocketFactory(), new ZipServerSocketFactory() );

}

// 剩下的是你自己的程序实现

}

现在你的通信数据得到了压缩.

关于作者:

Tony Sintes 是一个独立咨询人,同时也是First Class Consulting, Inc. 的创始人.这一咨询公司主要致力与对各个不同的企业系统进行量身定制和培训 . 业余时间,Tony 是一个积极的自由作家,同时也是Sams出版的<<21天学通面向对象编程>>的作者 (Sams, 2001; ISBN: 0672321092).

资源:

To download the source code that accompanies this article, go to:

http://www.javaworld.com/javaworld/javaqa/2001-12/ziprmi/01-qa-1207-ziprmi.zip

"Zip Your Data and Improve the Performance of Your Network-Based Applications," Todd Sundsted (JavaWorld, November 1998):

http://www.javaworld.com/javaworld/jw-11-1998/jw-11-howto.html

"Creating a Custom RMI Socket Factory," (Sun Microsystems, 1999):

http://java.sun.com/products/jdk/1.2/docs/guide/rmi/rmisocketfactory.doc.html

"Creating a Custom Socket Type," (Sun Microsystem

时间: 2024-08-08 12:19:23

sooket数据成传输压缩的相关文章

关于webservice大数据量传输时的压缩和解压缩

当访问WebSerivice时,如果数据量很大,传输数据时就会很慢.为了提高速度,我们就会想到对数据进行压缩.首先我们来分析一下. 当在webserice中传输数据时,一般都采用Dataset进行数据传输.执行的过程就是先把Dataset转化为xml进行传输,Dataset转化为xml的格式如下: [html] view plaincopy <DataSetName> <DataTableName> <Column1Name>.......</Column1Nam

网络TCp数据的传输设计(黏包处理)

//1.该片为引用别人的文章:http://www.cnblogs.com/alon/archive/2009/04/16/1437599.html 解决TCP网络传输"粘包"问题 解决TCP网络传输"粘包"问题 作者:杨小平 王胜开 原文出处:http://www.ciw.com.cn/ 当前在网络传输应用中,广泛采用的是TCP/IP通信协议及其标准的socket应用开发编程接口(API).TCP/IP传输层有两个并列的协议:TCP和UDP.其中TCP(trans

WCF大数据量传输解决方案

文章内容列表:1. 场景:2. 解决方案3. WCF契约与服务实现设计静态图4. WCF契约与服务实现设计详细说明6. 服务端启动服务代码:7. 客户端代码8.   WCF大数据量传输解决方案源码下载 1. 场景: WCF在网络传输中,大数据量传输造成网络阻塞,宽带无法承受: 2. 解决方案 解决WCF在网络传输中的大数据量问题: A.需要把相关数据序列化成字节流,再对字节流进行压缩,再进行传输,到了客户端再做反向操作便可获得原始数据. B.如果压缩后的数据仍然较大时,可以再压缩流后,再对流进行

大数据成神之路-Linux基础

Linux命令 我是小白,我从来没玩过Linux,请点这里: https://user-gold-cdn.xitu.io/2019/2/24/1691e1dda7807059 推荐的一个Git仓库 我有些基础,推荐一个快速查询命令的手册,请点这里: https://github.com/jaywcjlove/linux-command 大数据成神之路目录 大数据开发基础 Java基础 NIO 并发 JVM 分布式 Zookeeper RPC Netty Java基础 NIO 并发容器 JVM 分

解决WCF大数据量传输 ,System.Net.Sockets.SocketException: 远程主机强迫关闭了一个现有的连接

开发中所用的数据需要通过WCF进行数据传输,结果就遇到了WCF大量传输问题 也就是提示System.Net.Sockets.SocketException: 远程主机强迫关闭了一个现有的连接 网上解决方案都是千篇一律互相转发的,并且没有明确的解决方案或者按照,各个博客中的解决方案都没能解决这个问题. 为此我整整浪费了一天时间用来解决这个问题,而且用了最笨的办法一点点的尝试网上所查到的方案.对于精研WCF来说的这可能是一个小问题,但是对于仅仅了解wcf,一知半解的会很困惑.将解决方案贴出来希望能帮

大数据量传输时配置WCF的注意事项

原文:大数据量传输时配置WCF的注意事项 WCF传输数据量的能力受到许多因素的制约,如果程序中出现因需要传输的数据量较大而导致调用WCF服务失败的问题,应注意以下配置: 1.MaxReceivedMessageSize:获取或设置配置了此绑定的通道上可以接收的消息的最大大小. basicHttpBinding等预定义的绑定一般具有MaxReceivedMessageSize属性,CustomBinding则需要在Transport中定义. 示例代码: <bindings> <custom

大文件/数据网络传输方法总结(转载)

网络编程中不免会遇到需要传输大数据.大文件的情况,而由于socket本身缓冲区的限制,大概一次只能发送4K左右的数据,所以在传输大数据时客户端就需要进行分包,在目的地重新组包.而实际上已有一些消息/通讯中间件对此进行了封装,提供了直接发送大数据/文件的接口:除此之外,利用共享目录,ftp,ssh等系统命令来实现大文件/数据也不失为一种好的方法. 1.基础的基于socket进行传输 基础的基于socket进行传输关键在于控制,需要自己行分包和组包. ////////////////////////

read/write数据读写传输方式(转)

前言 笔者本打算撰写一篇讲解标准I/O(缓存I/O)的博文,但是发现已经有网友做过同样的工作,并且工作质量上乘,特转载于此. 原文地址http://lenky.info/archives/2012/08/1856 正文 利用系统调用函数read()/write()是我们平常用得最多的一种数据读写方式,大多数情况下我们并没有考虑这种数据读写方式的执行效率,因为在很多并不以数据频繁读写为性能瓶颈的应用程序中函数read()/write()消耗的执行时间可以忽略,但是它们内在具体实现和执行效率到底如何

execl列数据成等差递增递减

如上图若想以10,20,30...这样递增: 1).首先需选中10,20所在的单元格,鼠标移至20所在的单元格右下角 2).此时会出现一个十字"十"符号,点击直向下拖动至某个地方,此时,数据就会以20,30,40...这样填充上了 ps:在第二步出现十字符号时,也可以双击一下十字符号,此时下方也会填充20,30,40...的数据(这样操作,前提条件是和该列紧挨的一列必须是有数据的,如上图所示) 在第二步出现十字符号时,直向上拖动至某个地方,此时10上方就会出现0,-10,-20...这