HttpWebRequest 抓取页面异常处理方法

最新推荐文章于 2024-02-20 12:16:11 发布

木槿开成万花町c

最新推荐文章于 2024-02-20 12:16:11 发布

阅读量1.5k

点赞数

分类专栏：页面抓取处理方法文章标签： httpwebrequest

本文链接：https://blog.csdn.net/mchgogo/article/details/52369937

版权

页面抓取处理方法专栏收录该内容

1 篇文章 0 订阅

订阅专栏

// HttpWebRequest 抓取页面异常处理方法
public static String GetHtmlTest(String url){
String fullhtml=null;
while(true){
try{
HttpWebRequest req=(HttpWebRequest)WebRequest.Create(url);
req.Method="GET";
req.UserAgent="Opera/9.25 (Window NT 6.0; U; en)";
req.KeepAlive=true;
req.Timeout=6000000;
HttpWebResponse resp=(HttpWebResponse)req.GetResponse();
if(resp.StatusCode!=HttpStatusCode.ok){
contiue;
StreamReader sr = new StreamReader(resp.GetResponseStream(), Encoding.UTF8);
fullhtml = sr.ReadToEnd().Trim();
resp.Close();
sr.Close();
break;
}
}catch(WebException e){
e.StackTrace.ToString();
System.Diagnostics.Trace.WriteLine(e.Message);
if(true){
continue;
}
}
return fullhtml;
}
}