用C#编写自动抓取网页数据

我们每天业务需从上一级的系统中(B/S)中获取任务,上一级系统升级,没有及时提供数据包下载,而任务量又大,和上一级沟通又是被一拖再拖,没办法只能是录入人员登录上级系统,然后原始的拷贝粘贴,效率,速度太慢,在这种情况下只能自己做个抓取小软件(见下图所示)了。

        经过对比,系统中引用了HtmlAgilityPack 这个组件,简单记录一下使用

        经过获取html源码以后 读取<input  type="hidden" name="appnum" value="20170000001">

        注意利用此组件读取html源码时候,双引号会使用转义字符 &#034; ,为使得内容一致,导入到数据库或显示时必须转为 双引号

 public static String GetHtmlNodeValueByElementName(String html, String nodename)
       {


           HtmlDocument htmlDoc = new HtmlDocument();
           htmlDoc.LoadHtml(@html);
           string selectnodename = "";
            selectnodename = string.Format("//input[@name='{0}']", nodename);
            HtmlNode htmlNode= htmlDoc.DocumentNode.SelectSingleNode(selectnodename);
            if (htmlNode != null)
            {
                return htmlNode.Attributes["value"].Value;
            }
            else {
                return "";
            }
        
            
     
       }


相关推荐
©️2020 CSDN 皮肤主题: 编程工作室 设计师:CSDN官方博客 返回首页