.net 文件下载上传、网页抓取 用WebClient实现

.net 文件下载上传、网页抓取 用WebClient实现

我们知道用 WebRequest（HttpWebRequest、FtpWebRequest） 和 WebResponse（HttpWebResponse、FtpWebResponse）可以实现文件下载上传、网页抓取，可是用 WebClient 更轻松。

 

用 DownloadFile 下载网页

 

using (System.Net.WebClient client = new System.Net.WebClient())
{
    client.DownloadFile("http://www.baidu.com/", "C://logData.txt");
}

就这样，http://www.baidu.com/ 首页就被保存到 C 盘下了。

 

 

用 DownloadData 或 OpenRead 抓取网页

using (System.Net.WebClient client = new System.Net.WebClient())
{
    byte[] bytes = client.DownloadData("http://www.baidu.com/");
    string str = (System.Text.Encoding.GetEncoding("gb2312").GetString(bytes);
}

我们将抓取来的网页赋给变量 str，任由我们使用。也可以用 OpenRead 方法来获取数据流。

 

using (System.Net.WebClient client = new System.Net.WebClient())
{
    using (System.IO.Stream stream = client.OpenRead("http://www.baidu.com/"))
    {
        using (System.IO.StreamReader reader = new System.IO.StreamReader(stream, System.Text.Encoding.GetEncoding("gb2312")))
        {
            string str = reader.ReadToEnd();
            reader.Close();
        }
        stream.Close();
    }
}

 

用 UploadFile 上传文件

相对于 DownloadData、OpenRead，WebClient 也具有 UploadData、OpenWrite 方法，但最常用的恐怕还是上传文件，也就是用方法 UploadFile。

 

using (System.Net.WebClient client = new System.Net.WebClient())
{
    client.Credentials = new System.Net.NetworkCredential("用户名", "密码");
    client.UploadFile("ftp://www.baidu.com/logData.txt", "C://logData.txt");
}

注意 UploadFile 的第一个参数，要把上传后形成的文件名加上去，也就是说这里不能是：ftp://www.baidu.com/。