Android开发_使用HttpURLConnection实现多线程下载

版权声明:本文为博主原创文章,未经博主允许不得转载。 https://blog.csdn.net/zhangty0223/article/details/9353495

HttpURLConnection继承了URLConnection,因此也可用于向指定网站发送GET请求、POST请求,而且它在URLConnection基础上提供了如下便捷方法:

实现多线程下载的步骤:


下边的总结对我帮助蛮大的~不仅用法了解,整个连接流程也要明白!

原文链接地址: 
http://www.blogjava.net/supercrsky/articles/247449.html 

针对JDK中的URLConnection连接Servlet的问题,网上有虽然有所涉及,但是只是说明了某一个或几个问题,是以FAQ的方式来解决的,而且比较零散,现在对这个类的使用就本人在项目中的使用经验做如下总结: 
1:> URL请求的类别: 
分为二类,GET与POST请求。二者的区别在于: 
     a:) get请求可以获取静态页面,也可以把参数放在URL字串后面,传递给servlet, 
     b:) post与get的不同之处在于post的参数不是放在URL字串里面,而是放在http请求的正文内。 


2:> URLConnection的对象问题: 
URLConnection的对象,如下代码示例: 

// 下面的index.jsp由<servlet-mapping>映射到 
// 一个Servlet(com.quantanetwork.getClientDataServlet) 
// 该Servlet的注意点下边会提到 

复制代码
1 URL url = new URL("http://localhost:8080/TestHttpURLConnectionPro/index.jsp");
2
3 URLConnection rulConnection = url.openConnection();
4 // 此处的urlConnection对象实际上是根据URL的
5 // 请求协议(此处是http)生成的URLConnection类
6 // 的子类HttpURLConnection,故此处最好将其转化
7 // 为HttpURLConnection类型的对象,以便用到
8 // HttpURLConnection更多的API.如下:
9  
10 HttpURLConnection httpUrlConnection = (HttpURLConnection) rulConnection;
复制代码

3:> HttpURLConnection对象参数问题 

复制代码
1 // 设置是否向httpUrlConnection输出,因为这个是post请求,参数要放在
2  // http正文内,因此需要设为true, 默认情况下是false;
3  httpUrlConnection.setDoOutput(true);
4
5  // 设置是否从httpUrlConnection读入,默认情况下是true;
6  httpUrlConnection.setDoInput(true);
7
8  // Post 请求不能使用缓存
9  httpUrlConnection.setUseCaches(false);
10
11  // 设定传送的内容类型是可序列化的java对象
12  // (如果不设此项,在传送序列化对象时,当WEB服务默认的不是这种类型时可能抛java.io.EOFException)
13  httpUrlConnection.setRequestProperty("Content-type", "application/x-java-serialized-object");
14
15  // 设定请求的方法为"POST",默认是GET
16  httpUrlConnection.setRequestMethod("POST");
17
18  // 连接,从上述第2条中url.openConnection()至此的配置必须要在connect之前完成,
19   httpUrlConnection.connect();
复制代码

4:>  HttpURLConnection连接问题: 

1 // 此处getOutputStream会隐含的进行connect(即:如同调用上面的connect()方法,
2  // 所以在开发中不调用上述的connect()也可以)。
3  OutputStream outStrm = httpUrlConnection.getOutputStream();

5:> HttpURLConnection写数据与发送数据问题: 

复制代码
1 // 现在通过输出流对象构建对象输出流对象,以实现输出可序列化的对象。
2   ObjectOutputStream objOutputStrm = new ObjectOutputStream(outStrm);
3
4 // 向对象输出流写出数据,这些数据将存到内存缓冲区中
5   objOutputStrm.writeObject(new String("我是测试数据"));
6
7 // 刷新对象输出流,将任何字节都写入潜在的流中(些处为ObjectOutputStream)
8   objOutputStm.flush();
9
10   // 关闭流对象。此时,不能再向对象输出流写入任何数据,先前写入的数据存在于内存缓冲区中,
11   // 在调用下边的getInputStream()函数时才把准备好的http请求正式发送到服务器
12   objOutputStm.close();
13  
14   // 调用HttpURLConnection连接对象的getInputStream()函数,
15   // 将内存缓冲区中封装好的完整的HTTP请求电文发送到服务端。
16   InputStream inStrm = httpConn.getInputStream(); // <===注意,实际发送请求的代码段就在这里
17  
18 // 上边的httpConn.getInputStream()方法已调用,本次HTTP请求已结束,下边向对象输出流的输出已无意义,
19 // 既使对象输出流没有调用close()方法,下边的操作也不会向对象输出流写入任何数据.
20 // 因此,要重新发送数据时需要重新创建连接、重新设参数、重新创建流对象、重新写数据、
21 // 重新发送数据(至于是否不用重新这些操作需要再研究)
22 objOutputStm.writeObject(new String(""));
23 httpConn.getInputStream()
复制代码

总结:a:) HttpURLConnection的connect()函数,实际上只是建立了一个与服务器的tcp连接,并没有实际发送http请求。 

    无论是post还是get,http请求实际上直到HttpURLConnection的getInputStream()这个函数里面才正式发送出去。 
       b:) 在用POST方式发送URL请求时,URL请求参数的设定顺序是重中之重, 
    对connection对象的一切配置(那一堆set函数) 
    都必须要在connect()函数执行之前完成。而对outputStream的写操作,又必须要在inputStream的读操作之前。 
    这些顺序实际上是由http请求的格式决定的。 
    如果inputStream读操作在outputStream的写操作之前,会抛出例外: 
    java.net.ProtocolException: Cannot write output after reading input....... 
       
       c:) http请求实际上由两部分组成, 
    一个是http头,所有关于此次http请求的配置都在http头里面定义, 
           一个是正文content。 
    connect()函数会根据HttpURLConnection对象的配置值生成http头部信息,因此在调用connect函数之前, 
    就必须把所有的配置准备好。 
       d:) 在http头后面紧跟着的是http请求的正文,正文的内容是通过outputStream流写入的, 
    实际上outputStream不是一个网络流,充其量是个字符串流,往里面写入的东西不会立即发送到网络, 
    而是存在于内存缓冲区中,待outputStream流关闭时,根据输入的内容生成http正文。 
    至此,http请求的东西已经全部准备就绪。在getInputStream()函数调用的时候,就会把准备好的http请求 
    正式发送到服务器了,然后返回一个输入流,用于读取服务器对于此次http请求的返回信息。由于http 
    请求在getInputStream的时候已经发送出去了(包括http头和正文),因此在getInputStream()函数 
    之后对connection对象进行设置(对http头的信息进行修改)或者写入outputStream(对正文进行修改) 
    都是没有意义的了,执行这些操作会导致异常的发生。 

6:> Servlet端的开发注意点: 
a:) 对于客户端发送的POST类型的HTTP请求,Servlet必须实现doPost方法,而不能用doGet方法。 
b:) 用HttpServletRequest的getInputStream()方法取得InputStream的对象,比如: 
     InputStream inStream = httpRequest.getInputStream(); 
     现在调用inStream.available()(该方法用于“返回此输入流下一个方法调用可以不受阻塞地 
     从此输入流读取(或跳过)的估计字节数”)时,永远都反回0。试图使用此方法的返回值分配缓冲区, 
     以保存此流所有数据的做法是不正确的。那么,现在的解决办法是 
     Servlet这一端用如下实现: 
     InputStream inStream = httpRequest.getInputStream(); 
     ObjectInputStream objInStream = new ObjectInputStream(inStream); 
     Object obj = objInStream.readObject(); 
     // 做后续的处理 
     // 。。。。。。 
     // 。。。 。。。 
     而客户端,无论是否发送实际数据都要写入一个对象(那怕这个对象不用),如: 
     ObjectOutputStream objOutputStrm = new ObjectOutputStream(outStrm); 
     objOutputStrm.writeObject(new String("")); // 这里发送一个空数据 
     // 甚至可以发一个null对象,服务端取到后再做判断处理。 
     objOutputStrm.writeObject(null); 
     objOutputStrm.flush(); 
     objOutputStrm.close(); 

注意:上述在创建对象输出流ObjectOutputStream时,如果将从HttpServletRequest取得的输入流 
      (即:new ObjectOutputStream(outStrm)中的outStrm)包装在BufferedOutputStream流里面, 
      则必须有objOutputStrm.flush();这一句,以便将流信息刷入缓冲输出流.如下: 
      ObjectOutputStream objOutputStrm = new ObjectOutputStream(new BufferedOutputStream(outStrm)); 
      objOutputStrm.writeObject(null); 
      objOutputStrm.flush(); // <======此处必须要有. 
      objOutputStrm.close(); 

HttpURLConnection是基于HTTP协议的,其底层通过socket通信实现。如果不设置超时(timeout),在网络异常的情况下,可能会导致程序僵死而不继续往下执行。可以通过以下两个语句来设置相应的超时: 
System.setProperty("sun.net.client.defaultConnectTimeout", 超时毫秒数字符串); 
System.setProperty("sun.net.client.defaultReadTimeout", 超时毫秒数字符串); 


其中: sun.net.client.defaultConnectTimeout:连接主机的超时时间(单位:毫秒) 
sun.net.client.defaultReadTimeout:从主机读取数据的超时时间(单位:毫秒) 

例如: 
System.setProperty("sun.net.client.defaultConnectTimeout", "30000"); 
System.setProperty("sun.net.client.defaultReadTime 

Java中可以使用HttpURLConnection来请求WEB资源。 
HttpURLConnection对象不能直接构造,需要通过URL.openConnection()来获得HttpURLConnection对象,示例代码如下: 

1 String szUrl = "http://www.ee2ee.com/";
2 URL url = new URL(szUrl);
3 HttpURLConnection urlCon = (HttpURLConnection)url.openConnection();

HttpURLConnection是基于HTTP协议的,其底层通过socket通信实现。如果不设置超时(timeout),在网络异常的情况下,可能会导致程序僵死而不继续往下执行。可以通过以下两个语句来设置相应的超时: 
System.setProperty("sun.net.client.defaultConnectTimeout", 超时毫秒数字符串); 
System.setProperty("sun.net.client.defaultReadTimeout", 超时毫秒数字符串); 


其中: sun.net.client.defaultConnectTimeout:连接主机的超时时间(单位:毫秒) 
sun.net.client.defaultReadTimeout:从主机读取数据的超时时间(单位:毫秒) 

例如: 
System.setProperty("sun.net.client.defaultConnectTimeout", "30000"); 
System.setProperty("sun.net.client.defaultReadTimeout", "30000"); 

JDK 1.5以前的版本,只能通过设置这两个系统属性来控制网络超时。在1.5中,还可以使用HttpURLConnection的父类URLConnection的以下两个方法: 
setConnectTimeout:设置连接主机超时(单位:毫秒) 
setReadTimeout:设置从主机读取数据超时(单位:毫秒) 

例如: 
1 HttpURLConnection urlCon = (HttpURLConnection)url.openConnection();
2 urlCon.setConnectTimeout(30000);
3 urlCon.setReadTimeout(30000);
  


需要注意的是,笔者在JDK1.4.2环境下,发现在设置了defaultReadTimeout的情况下,如果发生网络超时,HttpURLConnection会自动重新提交一次请求,出现一次请求调用,请求服务器两次的问题(Trouble)。我认为这是JDK1.4.2的一个bug。在JDK1.5.0中,此问题已得到解决,不存在自动重发现象。out", "3000





下面用一个示例来示范使用HttpURLConnection实现多线程下载。此代码来源疯狂讲义一书,该代码主要思路:在Activity中点击按钮,调用DownUtil的download()方法,在download()中启动四个线程去下载资源,每个线程负责下载自己的那部分资源,代码如下:

Activity:

[java] view plaincopy
  1. package com.home.activity;  
  2.   
  3. import java.util.Timer;  
  4. import java.util.TimerTask;  
  5.   
  6. import android.app.Activity;  
  7. import android.os.Bundle;  
  8. import android.os.Handler;  
  9. import android.os.Message;  
  10. import android.view.View;  
  11. import android.view.View.OnClickListener;  
  12. import android.widget.Button;  
  13. import android.widget.EditText;  
  14. import android.widget.ProgressBar;  
  15.   
  16. import com.home.multithreaddown.R;  
  17. import com.home.util.DownUtil;  
  18.   
  19. public class MultiThreadDownActivity extends Activity {  
  20.     private EditText urlText;  
  21.     private EditText targetText;  
  22.     private Button downBtn;  
  23.     private ProgressBar bar;  
  24.     private DownUtil downUtil;  
  25.     private int mDownStatus;  
  26.     private Handler handler;  
  27.   
  28.     @Override  
  29.     protected void onCreate(Bundle savedInstanceState) {  
  30.         super.onCreate(savedInstanceState);  
  31.         setContentView(R.layout.main);  
  32.         // 获取界面中控件  
  33.         targetText = (EditText) findViewById(R.id.main_et_name);  
  34.         urlText = (EditText) findViewById(R.id.main_et_url);  
  35.         downBtn = (Button) findViewById(R.id.main_btn_download);  
  36.         bar = (ProgressBar) findViewById(R.id.main_progressBar);  
  37.         // 创建一个Handler对象  
  38.         handler = new Handler() {  
  39.             public void handleMessage(Message msg) {  
  40.                 if (msg.what == 0x123) {  
  41.                     bar.setProgress(mDownStatus);  
  42.                 }  
  43.             }  
  44.         };  
  45.         downBtn.setOnClickListener(new OnClickListener() {  
  46.   
  47.             @Override  
  48.             public void onClick(View v) {  
  49.                 // 初始化DownUtil对象  
  50.                 downUtil = new DownUtil(urlText.getText().toString(),  
  51.                         targetText.getText().toString(), 4);  
  52.                 try {  
  53.                     // 开始下载  
  54.                     downUtil.download();  
  55.                 } catch (Exception e) {  
  56.                     e.printStackTrace();  
  57.                 }  
  58.                 // 定义每秒调度获取一次系统的完成进度  
  59.                 final Timer timer = new Timer();  
  60.                 timer.schedule(new TimerTask() {  
  61.                     public void run() {  
  62.                         // 获取下载任务的完成比率  
  63.                         double completeRate = downUtil.getCompleteRate();  
  64.                         mDownStatus = (int) (completeRate * 100);  
  65.                         // 发送消息通知界面更新进度条  
  66.                         handler.sendEmptyMessage(0x123);  
  67.                         // 下载完成后取消任务调度  
  68.                         if (mDownStatus >= 100) {  
  69.                             timer.cancel();  
  70.                         }  
  71.                     }  
  72.                 }, 0100);  
  73.   
  74.             }  
  75.         });  
  76.     }  
  77.   
  78. }  

下载的工具类(DownUtil):

[java] view plaincopy
  1. package com.home.util;  
  2.   
  3. import java.io.InputStream;  
  4. import java.io.RandomAccessFile;  
  5. import java.net.HttpURLConnection;  
  6. import java.net.URL;  
  7.   
  8. public class DownUtil {  
  9.     // 定义下载资源的路径  
  10.     private String path;  
  11.     // 指定所下载的文件的保存位置  
  12.     private String targetFile;  
  13.     // 定义需要使用多少线程下载资源  
  14.     private int threadNum;  
  15.     // 定义下载的文件的总大小  
  16.     private int fileSize;  
  17.     // 定义下载的线程对象  
  18.     private DownloadThread[] threads;  
  19.   
  20.     public DownUtil(String path, String targetFile, int threadNum) {  
  21.         this.path = path;  
  22.         this.threadNum = threadNum;  
  23.         // 初始化threads数组  
  24.         threads = new DownloadThread[threadNum];  
  25.         this.targetFile = targetFile;  
  26.     }  
  27.   
  28.     public void download() throws Exception {  
  29.         URL url = new URL(path);  
  30.         HttpURLConnection conn = (HttpURLConnection) url.openConnection();  
  31.         conn.setConnectTimeout(5 * 1000);  
  32.         conn.setRequestMethod("GET");  
  33.         conn.setRequestProperty(  
  34.                 "Accept",  
  35.                 "image/gif,image/jpeg,image/pjpeg,application/x-shockwaveflash,application/x-ms-xbap,application/xaml+xml,application/vnd.ms-xpsdocument,application/x-ms-application,application/vnd.ms-excel,application/vnd.ms-powerpoint,application/msword,*/*");  
  36.         conn.setRequestProperty("Accept-Language""zh-CN");  
  37.         conn.setRequestProperty("Charset""UTF-8");  
  38.         conn.setRequestProperty(  
  39.                 "User-Agent",  
  40.                 "Mozilla/4.0(compatible;MSIE7.0;Windows NT 5.2;Trident/4.0;.NET CLR 1.1.4322;.NET CLR 2.0.50727;.NET CLR 3.0.04506.30;.NET CLR 3.0.4506.2152;.NET CLR 3.5.30729)");  
  41.   
  42.         conn.setRequestProperty("Connection""Keep-Alive");  
  43.         // 得到文件大小  
  44.         fileSize = conn.getContentLength();  
  45.         conn.disconnect();  
  46.         int currentPartSize = fileSize / threadNum + 1;  
  47.         RandomAccessFile file = new RandomAccessFile(targetFile, "rw");  
  48.         // 设置本地文件的大小  
  49.         file.setLength(fileSize);  
  50.         file.close();  
  51.         for (int i = 0; i < threadNum; i++) {  
  52.             // 计算每条线程的下载的开始位置  
  53.             int startPos = i * currentPartSize;  
  54.             // 每个线程使用一个RandomAccessFile进行下载  
  55.             RandomAccessFile currentPart = new RandomAccessFile(targetFile,  
  56.                     "rw");  
  57.             // 定位该线程的下载位置  
  58.             currentPart.seek(startPos);  
  59.             // 创建下载线程  
  60.             threads[i] = new DownloadThread(startPos, currentPartSize,  
  61.                     currentPart);  
  62.             // 启动下载线程  
  63.             threads[i].start();  
  64.         }  
  65.     }  
  66.   
  67.     /**  
  68.      * 获取下载完成的百分比  
  69.      *   
  70.      * @return  
  71.      */  
  72.     public double getCompleteRate() {  
  73.         // 统计多条线程已经下载的总大小  
  74.         int sumSize = 0;  
  75.         for (int i = 0; i < threadNum; i++) {  
  76.             sumSize += threads[i].length;  
  77.         }  
  78.         // 返回已经完成的百分比  
  79.         return sumSize * 1.0 / fileSize;  
  80.     }  
  81.   
  82.     private class DownloadThread extends Thread {  
  83.         // 当前线程的下载位置  
  84.         private int startPos;  
  85.         // 定义当前线程负责下载的文件大小  
  86.         private int currentPartSize;  
  87.         // 当前线程需要下载的文件块  
  88.         private RandomAccessFile currentPart;  
  89.         // 定义该线程已下载的字节数  
  90.         private int length = 0;  
  91.   
  92.         public DownloadThread(int startPos, int currentPartSize,  
  93.                 RandomAccessFile currentPart) {  
  94.             this.startPos = startPos;  
  95.             this.currentPartSize = currentPartSize;  
  96.             this.currentPart = currentPart;  
  97.         }  
  98.   
  99.         public void run() {  
  100.             try {  
  101.                 URL url = new URL(path);  
  102.                 HttpURLConnection conn = (HttpURLConnection) url  
  103.                         .openConnection();  
  104.                 conn.setConnectTimeout(5 * 1000);  
  105.                 conn.setRequestMethod("GET");  
  106.                 conn.setRequestProperty(  
  107.                         "Accept",  
  108.                         "image/gif,image/jpeg,image/pjpeg,application/x-shockwaveflash,application/x-ms-xbap,application/xaml+xml,application/vnd.ms-xpsdocument,application/x-ms-application,application/vnd.ms-excel,application/vnd.ms-powerpoint,application/msword,*/*");  
  109.                 conn.setRequestProperty("Accept-Language""zh-CN");  
  110.                 conn.setRequestProperty("Charset""UTF-8");  
  111.                 InputStream is = conn.getInputStream();  
  112.                 // 跳过startPos个字符,表明该线程只下载自己负责那部分文件  
  113.                 is.skip(startPos);  
  114.                 byte[] by = new byte[1024];  
  115.                 int hasRead = 0;  
  116.                 // 读取网络数据,并写入本地文件  
  117.                 while (length < currentPartSize  
  118.                         && (hasRead = is.read(by)) != -1) {  
  119.                     currentPart.write(by, 0, hasRead);  
  120.                     // 累计该线程下载的总大小  
  121.                     length += hasRead;  
  122.                 }  
  123.                 currentPart.close();  
  124.                 is.close();  
  125.             } catch (Exception e) {  
  126.                 e.printStackTrace();  
  127.             }  
  128.         }  
  129.     }  
  130. }  

Activity布局XML:

[html] view plaincopy
  1. <LinearLayout xmlns:android="http://schemas.android.com/apk/res/android"  
  2.     android:layout_width="match_parent"  
  3.     android:layout_height="match_parent"  
  4.     android:orientation="vertical" >  
  5.   
  6.     <LinearLayout  
  7.         android:layout_width="match_parent"  
  8.         android:layout_height="wrap_content"  
  9.         android:orientation="horizontal" >  
  10.   
  11.         <TextView  
  12.             android:layout_width="wrap_content"  
  13.             android:layout_height="wrap_content"  
  14.             android:text="输入url:" />  
  15.   
  16.         <EditText  
  17.             android:id="@+id/main_et_url"  
  18.             android:layout_width="match_parent"  
  19.             android:layout_height="wrap_content" />  
  20.     </LinearLayout>  
  21.   
  22.     <LinearLayout  
  23.         android:layout_width="match_parent"  
  24.         android:layout_height="wrap_content"  
  25.         android:orientation="horizontal" >  
  26.   
  27.         <TextView  
  28.             android:layout_width="wrap_content"  
  29.             android:layout_height="wrap_content"  
  30.             android:text="输入保存的文件名:" />  
  31.   
  32.         <EditText  
  33.             android:id="@+id/main_et_name"  
  34.             android:layout_width="match_parent"  
  35.             android:layout_height="wrap_content" />  
  36.     </LinearLayout>  
  37.   
  38.     <Button  
  39.         android:id="@+id/main_btn_download"  
  40.         android:layout_width="wrap_content"  
  41.         android:layout_height="wrap_content"  
  42.         android:text="下载" />  
  43.   
  44.     <ProgressBar  
  45.         android:id="@+id/main_progressBar"  
  46.         style="@android:style/Widget.ProgressBar.Horizontal"  
  47.         android:layout_width="match_parent"  
  48.         android:layout_height="wrap_content" />  
  49.   
  50. </LinearLayout>  

权限:

[html] view plaincopy
  1. <!-- 在SD卡中创建与删除文件权限 -->  
  2. <uses-permission android:name="android.permission.MOUNT_UNMOUNT_FILESYSTEMS"/>  
  3. <!-- 向SD卡写入数据权限 -->  
  4. <uses-permission android:name="android.permission.WRITE_EXTERNAL_STORAGE"/>  
  5. <!-- 授权访问网络 -->  
  6. <uses-permission android:name="android.permission.INTERNET"/>  


没有更多推荐了,返回首页