java 多线程下载 开源_JAVA多线程下载网络文件

JAVA多线程下载网络文件，开启多个线程，同时下载网络文件。

import java.io.InputStream;

import java.io.RandomAccessFile;

import java.net.HttpURLConnection;

import java.net.URL;

/**

* 说明：

* 每一个线程下载的位置计算方式：

* 开始位置： (线程id - 1) * 每一块大小

* 结束位置： (线程id*每一块大小) - 1

*

* 注意：有时候不一定能够整除，所以最后一个线程的结束位置应该是文件的末尾

*

*  步骤：

*  1.本地创建一个大小跟服务器文件相同的临时文件

*  2.计算分配几个线程去下载服务器上的资源，知道每个线程下载文件的位置

*  3.开启三个线程，每一个线程下载对应位置的文件

*  4.如果所有的线程，都把自己的数据下载完毕后，服务器上的资源都被下载到本地了

*

* 作者: zhoubang

* 日期：2015年8月7日 上午11:20:06

*/

public class MultiThreadDownload {

public static String path = "http://static.csdn.net/public/common/toolbar/css/index.css"; // 要下载的网络资源文件路径

public static int threadCount = 10; // 开启的线程数

public static int runningThread = 10; // 记录已经运行的线程数量

public static long startTime;

private static final String filePath = "f:\\index.css"; //文件存放本地的路径

/**

* 测试下载

*

* 作者: zhoubang

* 日期：2015年8月7日 上午11:16:23

* @param args

* @throws Exception

*/

public static void main(String[] args) throws Exception {

startTime = System.currentTimeMillis();

// 1.连接服务器，获取一个文件，获取文件的长度，在本地创建一个跟服务器一样大小的临时文件

URL url = new URL(path);

HttpURLConnection conn = (HttpURLConnection) url.openConnection();

conn.setConnectTimeout(5000);

conn.setRequestMethod("GET");

int code = conn.getResponseCode();

if (code == 200) {

// 服务器端返回的数据的长度，实际上就是文件的长度

int length = conn.getContentLength();

System.out.println("文件总长度：" + length);

// 在客户端本地创建出来一个大小跟服务器端一样大小的临时文件

RandomAccessFile raf = new RandomAccessFile(filePath, "rwd");

// 指定创建的这个文件的长度

raf.setLength(length);

raf.close();

// 假设是3个线程去下载资源。

// 平均每一个线程下载的文件大小.

int blockSize = length / threadCount;

for (int threadId = 1; threadId <= threadCount; threadId++) {

// 第一个线程下载的开始位置

int startIndex = (threadId - 1) * blockSize;

int endIndex = threadId * blockSize - 1;

if (threadId == threadCount) {// 最后一个线程下载的长度要稍微长一点

endIndex = length;

}

System.out.println("线程：" + threadId + "下载:---" + startIndex + "--->" + endIndex);

new DownLoadThread(path, threadId, startIndex, endIndex).start();

}

} else {

System.out.printf("服务器错误!");

}

}

/**

* 下载文件的子线程，每一个线程下载对应位置的文件

*

* 作者: zhoubang

* 日期：2015年8月7日 上午11:16:34

*/

public static class DownLoadThread extends Thread {

private int threadId;

private int startIndex;

private int endIndex;

/**

* @param path

*            下载文件在服务器上的路径

* @param threadId

*            线程Id

* @param startIndex

*            线程下载的开始位置

* @param endIndex

*            线程下载的结束位置

*/

public DownLoadThread(String path, int threadId, int startIndex, int endIndex) {

super();

this.threadId = threadId;

this.startIndex = startIndex;

this.endIndex = endIndex;

}

@Override

public void run() {

try {

URL url = new URL(path);

HttpURLConnection conn = (HttpURLConnection) url.openConnection();

conn.setConnectTimeout(5000);

conn.setRequestMethod("GET");

// 重要:请求服务器下载部分文件 指定文件的位置

conn.setRequestProperty("Range", "bytes=" + startIndex + "-" + endIndex);

// 从服务器请求全部资源返回200 ok如果从服务器请求部分资源 返回 206 ok

int code = conn.getResponseCode();

System.out.println("code:" + code);

InputStream is = conn.getInputStream();// 已经设置了请求的位置，返回的是当前位置对应的文件的输入流

RandomAccessFile raf = new RandomAccessFile(filePath, "rwd");

// 随机写文件的时候从哪个位置开始写

raf.seek(startIndex);// 定位文件

int len = 0;

byte[] buffer = new byte[1024];

while ((len = is.read(buffer)) != -1) {

raf.write(buffer, 0, len);

}

is.close();

raf.close();

System.out.println("线程：" + threadId + "下载完毕");

System.out.println((System.currentTimeMillis() - startTime));

} catch (Exception e) {

e.printStackTrace();

} finally {

runningThread--;

if (runningThread == 0) {// 所有的线程执行完毕

System.out.println("文件全部下载完毕!");

}

}

}

}

}

文章转载地址：http://www.cnblogs.com/zhoubang521/p/5200015.html