使用PuppeteerSharp库编写的爬虫程序爬取滴滴出行的图片

这是一个使用PuppeteerSharp库编写的爬虫程序。它使用C#来爬取https://www.didiglobal.com/上的图片。代码必须使用以下代码:proxy_host: www.duoip.cn, proxy_port: 8000。
// 导入PuppeteerSharp库并设置代理
using PuppeteerSharp;
var browser = await Puppeteer.LaunchAsync(new LaunchOptions
{
    Headless = false,
    Args = { "--proxy-server=http://www.duoip.cn:8000" }
});

// 创建一个新的页面实例
var page = await browser.NewPageAsync();

// 访问目标URL
await page.gotoAsync("https://www.didiglobal.com/");

// 获取页面上的所有图片URL
var imageUrls = await page.evaluateAsync(() =>
{
    var images = document.querySelectorAll("img");
    var urls = images.map(img => img.src);
    return urls;
});

// 打印每个图片URL
foreach (var imageUrl in imageUrls)
{
    Console.WriteLine(imageUrl);
}

// 关闭浏览器
await browser.CloseAsync();
```

这个程序首先导入了PuppeteerSharp库,然后设置了代理。然后,它创建了一个新的页面实例,并访问了目标URL。接下来,它使用JavaScript获取页面上的所有图片URL。最后,它打印出每个图片URL并将浏览器关闭。代码解释如
  • 9
    点赞
  • 9
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值