winfrom动态抓取网页数据

我们知道,如果网页的数据不是通过http协议加载到页面里面,或者ajax延迟加载数据到页面,这个时候不过你是什么语言request url获取的数据都是不完整的,

说白了需要的目标数据抓不到,下面通过2中方法处理:


方法一:WebBrowser延迟的加载采集地址(线程等待)配合js来处理。

1.目标网址:http://www.2ya.tv/k/1 ,顺便说一下,这个站做的非常厉害,可以通过浏览器看到作者使用了大量的手段防止爬虫和分析。id重复,访问频次校验,js加密压缩,302跳转,多域名配置,非常规命名,重复混淆节点等等,常规市面上的手段基本都搞了(当然,我们可以通过获取到302跳转的网址,然后再抓取,是没有问题的,这里介绍非常规手法)。

2.怎么搞到他的数据呢,HttpWebRequest是不行的,你会发现返回htm是null,php我没试验过。

3.通过winfrom的WebBrowser控件,我们加载完页面,然后WebBrowser和js进行交互,获取页面数据,再返回到winfrom控件层本身。

  • 1
    点赞
  • 6
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
你可以使用C# WinForms动态写入参数数据。以下是一个示例代码,演示如何在WinForms应用程序中动态写入参数数据。 首先,确保你已经创建了一个WinForms应用程序,并有一个窗体(Form)。 然后,打开窗体的代码文件,在窗体的构造函数中添加以下代码: ```csharp public partial class Form1 : Form { public Form1() { InitializeComponent(); // 动态写入参数数据 WriteParametersData(); } private void WriteParametersData() { // 创建并设置参数数据 string param1 = "参数1"; int param2 = 123; bool param3 = true; // 创建并设置参数容器控件 TableLayoutPanel panel = new TableLayoutPanel(); panel.AutoSize = true; panel.ColumnCount = 2; // 创建并添加参数标签和值控件 Label label1 = new Label(); label1.Text = "参数1:"; panel.Controls.Add(label1); TextBox textBox1 = new TextBox(); textBox1.Text = param1; panel.Controls.Add(textBox1); Label label2 = new Label(); label2.Text = "参数2:"; panel.Controls.Add(label2); TextBox textBox2 = new TextBox(); textBox2.Text = param2.ToString(); panel.Controls.Add(textBox2); Label label3 = new Label(); label3.Text = "参数3:"; panel.Controls.Add(label3); CheckBox checkBox1 = new CheckBox(); checkBox1.Checked = param3; panel.Controls.Add(checkBox1); // 将参数容器控件添加到窗体 this.Controls.Add(panel); } } ``` 在上述代码中,我们在窗体的构造函数中调用了`WriteParametersData`方法,该方法创建了参数数据并将其动态添加到窗体上的一个容器控件(TableLayoutPanel)中。每个参数都由一个标签(Label)和一个值控件(TextBox或CheckBox)组成。 你可以根据需要调整参数的类型和数量,并在`WriteParametersData`方法中设置参数的值。记得在窗体上添加一个适当的容器控件来容纳参数数据。 这样,当你运行应用程序时,参数数据将会被动态写入到窗体中,供用户查看和编辑。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值