Selenium --- Selenium之实战案例

本文详细介绍了如何使用Selenium工具爬取京东网站的商品信息和图片。首先,通过设置ChromeOptions实现无头模式或打开浏览器,接着定位到搜索框输入关键词并点击搜索。然后设定等待时间,抓取商品列表中的商品名称和价格信息。在第二部分,文章讲解了如何保存搜索结果中的商品图片,包括获取图片URL和进行文件输出流操作。
摘要由CSDN通过智能技术生成

目录

 一、Selenium爬取JD商品信息

     1.初始化

     2.点开JD网址并指定关键字搜索

     3.设定睡眠时间(可根据网络速度实际调整)

     4.查找商品列表并获取相关信息

 二、Selenium爬取图片

     1.保存图片


 一、Selenium爬取JD商品信息

     1.初始化

     //将驱动加载到Java的JVM虚拟机中
     System.setProperty("webdriver.chrome.driver","D:\\chromedriver.exe");
     /************************** 方式一:不打开浏览器 **************************/
     //定义浏览器参数
     ChromeOptions chromeOptions = new ChromeOptions();
     //设置不打开浏览器
     chromeOptions.addArguments("--headless");
     //初始化驱动
     WebDriver driver = new ChromeDriver(chromeOptions);

     /************************** 方式二:打开浏览器 **************************/
     //初始化驱动
     WebDriver driver = new ChromeDriver();

     2.点开JD网址并指定关键字搜索

     driver.get("https://www.jd.com/");
     //输入关键字衣服
     driver.findElement(By.id("key")).sendKeys("衣服");
     //点击搜索按钮
     driver.findElement(By.cssSelector("button.button")).click();

 代码案例:

package demo;

import org.openqa.selenium.By;
import org.openqa.selenium.WebDriver;
import org.openqa.selenium.WebElement;
import org.openqa.selenium.chrome.ChromeDriver;
import org.openqa.selenium.chrome.ChromeOptions;

public class Demo2 {
    public static void main(String[] args) {
        //将驱动加载到Java的JVM虚拟机中
        System.setProperty("webdriver.chrome.driver","E:\\selenium\\chromedriver.exe");
        /************************** 方式一:不打开浏览器 **************************/
        //定义浏览器参数
//        ChromeOptions chromeOptions = new ChromeOptions();
        //设置不打开浏览器
//        chromeOptions.addArguments("--headless");
        //初始化驱动
//        WebDriver driver = new ChromeDriver(chromeOptions);

        /************************** 方式二:打开浏览器 **************************/
        //初始化驱动
        WebDriver driver = new ChromeDriver();
        //设置爬取网站
        driver.get("https://www.jd.com/");

        //获取JD网站首页中的查询条件输入框
        WebElement key = driver.findElement(By.id("
  • 1
    点赞
  • 7
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值