如何抓取谷歌，百度里面特定的搜索结果

最新推荐文章于 2020-12-09 13:28:16 发布

ICodering

最新推荐文章于 2020-12-09 13:28:16 发布

阅读量636

点赞数

文章标签：百度 string regex textbox web服务搜索引擎

在自己的网页里面写一个搜索引擎，输入搜索条件搜索后，在自己的页面里面显示抓取谷歌和百度里面的特定的搜索结果

今天看了一些文章感觉很有意思。针对这个问题，google貌似有WEB服务.直接调用. 百度的好像没有，只能用正则来弄。而且相当不方便。下面是一个简单的例子。

C# code

protected void Button1_Click(object sender, EventArgs e)

    {
       [color=#FF0000] Uri u = new Uri("http://www.google.cn/search?q="+TextBox1.Text+"&hl=zh-CN&ie=GB2312&lr=&nxpt=10.2068337957705091425725");
        HttpWebRequest dd = (HttpWebRequest)WebRequest.Create(u);[/color]        dd.Method = "GET";
        WebResponse req = dd.GetResponse();
        Stream str = req.GetResponseStream();
        StreamReader readerOfStream = new StreamReader(str, System.Text.Encoding.GetEncoding("GB2312"));
        string aa = readerOfStream.ReadToEnd();
        string abc = "";
        char aa1=(char)13;
        char aa2=(char)10;
        string Str = aa.Replace(aa1.ToString(), "").Replace(aa2.ToString(), "");
        

        [color=#FF9900]string StartStr = "<div><div class=g>[变量]";
        StartStr = StartStr.Replace("[变量]", ".*");
         string LastStr = "</div>";[/color]      
        
       
        string SearchStr = StartStr + ".*" + LastStr;
        Regex re = new Regex(SearchStr, RegexOptions.IgnoreCase);
        Match m = re.Match(aa);

        Response.Write(m.Value);
        str.Close();
    }