C# 网站数据采集网易NBA列表页面数据(新闻首页)源码

  string url = "http://sports.163.com/special/00051CA1/nbagd.html";
            string oWebResponses = "";
            HttpWebRequest oWebRequest = (HttpWebRequest)WebRequest.Create(url);
            oWebRequest.Timeout = 50000;
            oWebRequest.Method = "GET";
            using (var oWebResponse = (HttpWebResponse)oWebRequest.GetResponse())
            {
                if (oWebResponse != null && oWebResponse.StatusCode == HttpStatusCode.OK)
                {
                    Encoding enc = System.Text.Encoding.GetEncoding("GB2312");
                    Stream responseStream = oWebResponse.GetResponseStream();
                    if (responseStream != null)
                    {
                        var loResponseStream = new StreamReader(responseStream, enc);
                        oWebResponses = loResponseStream.ReadToEnd();


                        //截取字符串




                    }


                }
            }
            //     Console.WriteLine(oWebResponses);
          //  StringBuilder sbuilder = new StringBuilder();
            List<Ext> list =new List<Ext>();
string regstr="<li><span class=\"articleTitle\"><a href=\"(?<url>[^\"]*)\" target=\"_blank\">(?<title>[^<]*)</a></span>.*<span class=\"postTime\">(?<date>[^<]*)</span></li>";
            foreach (Match mch in Regex.Matches(oWebResponses, regstr))
            {
                //sbuilder.Append(mch.Groups["url"].Value);
                Ext es = new Ext();
                es.Url = mch.Groups["url"].Value;
                es.Title = mch.Groups["title"].Value;
                es.date = mch.Groups["date"].Value;


                list.Add(es);


            }


            foreach (Ext e in list)
            {
                Console.WriteLine(e.Url+";"+e.Title+";"+e.date);
            }
           
            Console.ReadKey();
  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值