spring boot基于selenium批量订阅网易云音乐歌曲

已于 2024-06-08 12:11:41 修改
阅读量701 收藏 10
点赞数 15
文章标签： selenium 测试工具
于 2024-06-07 13:33:45 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_42702229/article/details/139524307
版权

  1. 需求来源

    之前用的qq音乐听歌，收藏的歌单只能分享不能导出到其他平台（网易云），如果收藏的歌单歌曲太多就不适用手动复制添加，故本需求因此产生。QQ音乐网页端不能复制歌曲信息，要想拿到收藏夹歌曲信息，本人采用的方式是将歌曲下载下来，通过读取本地文件夹的文件名称获取歌曲信息。本打算用批量提交请求的方式操作，但是一方面由于网易云音乐请求数据都已加密（解密教程），另一方面拿到加密算法后，批量提交不返回状态码，应该是服务器有反爬虫机制，我尝试设置请求头和cookie无果。故最后采用selenium模拟浏览器点击实现。代码测试时间为2024年6月7日，后续网易云页面元素定位可能发生变化。

  2. 主要流程

  3. 引入相关依赖(spring boot 版本2.6.2)

            <dependency>
            <groupId>org.projectlombok</groupId>
            <artifactId>lombok</artifactId>
            <optional>true</optional>
        </dependency>
        <!-- https://mvnrepository.com/artifact/org.seleniumhq.selenium/selenium-java -->
        <dependency>
            <groupId>org.seleniumhq.selenium</groupId>
            <artifactId>selenium-java</artifactId>
            <version>3.141.59</version>
        </dependency>


        <dependency>
            <groupId>com.alibaba</groupId>
            <artifactId>fastjson</artifactId>
            <version>1.2.76</version>
        </dependency>

  4. WebDriver驱动下载

    1. 114及之前的版本
    2. 116版本
    3. 117/118/119版本

  5.  webdriver配置

    import org.openqa.selenium.Dimension;
import org.openqa.selenium.WebDriver;
import org.openqa.selenium.chrome.ChromeDriver;
import org.openqa.selenium.chrome.ChromeOptions;
import org.springframework.beans.factory.annotation.Value;
import org.springframework.context.annotation.Bean;
import org.springframework.context.annotation.Configuration;

import java.io.File;

@Configuration
public class ChromeDriverConfig {
    /**
     * 浏览器是否展示
     */
    @Value("${selenium.ISSHOW}")
    private Boolean ISSHOW;
    @Bean
    public WebDriver getWebDriver(){
        WebDriver driver = null;
        ChromeOptions options = new ChromeOptions();
        // 隐藏chrome爬数据
        if (!ISSHOW) {
            options.addArguments("--headless");
        }
        File file = new File("chromedriver.exe");
        System.setProperty("webdriver.chrome.driver", file.getAbsolutePath());
        driver = new ChromeDriver(options);
        Dimension dimension = new Dimension(1920, 1080);
        driver.manage().window().setSize(dimension);
        return driver;
    }
}

  6.  导入歌单信息（通过读取文件夹的方式）

    import java.io.IOException;
import java.nio.file.*;
import java.nio.file.attribute.BasicFileAttributes;
import java.util.ArrayList;
import java.util.List;

public class musicNameRead {
    static class musicOb {
        private String name;
        private String singer;
        private boolean isVip;

        public musicOb( String singer, String name,boolean isVip) {
            this.name = name;
            this.singer = singer;
            this.isVip = isVip;
        }

        public String getName() {
            return name;
        }

        public void setName(String name) {
            this.name = name;
        }

        public String getSinger() {
            return singer;
        }

        public void setSinger(String singer) {
            this.singer = singer;
        }

        public boolean isVip() {
            return isVip;
        }

        public void setVip(boolean vip) {
            isVip = vip;
        }

        @Override
        public String toString() {
            return "musicOb{" +
                    "name='" + name + '\'' +
                    ", singer='" + singer + '\'' +
                    ", isVip=" + isVip +
                    '}';
        }
    }
    public static   List<musicOb>  getMusicInfo(){
        Path path = Paths.get("D:\\song");
        final int[] i = {0};
        List<musicOb> list = new ArrayList<>();
        try {
            Files.walkFileTree(path, new SimpleFileVisitor<Path>() {
                @Override
                public FileVisitResult preVisitDirectory(Path dir, BasicFileAttributes attrs) {
                    // 如果你只想遍历到第一层目录，可以在这里返回FileVisitResult.SKIP_SUBTREE
                    return FileVisitResult.CONTINUE;
                }

                @Override
                public FileVisitResult visitFile(Path file, BasicFileAttributes attrs) {
                    String name = file.toFile().getName();
                    String[] split = name.split(" - ");
                    list.add(new musicOb(split[0].replaceAll(" ",""),split[1].substring(0,split[1].indexOf("[")),true));
                    i[0]++;
                    return FileVisitResult.CONTINUE;
                }


                @Override
                public FileVisitResult postVisitDirectory(Path dir, IOException exc) throws IOException {
                    // 在访问完一个目录后执行的操作，这里我们什么也不做
                    return FileVisitResult.CONTINUE;
                }
            });

        }
        catch (Exception e){
            e.printStackTrace();
        }
        return list;
    }
}

  7.  获取网易云登录Cookie

    1. chrome浏览器安装EditThisCookie插件，用来将cookie转成json。

    2. chrome浏览器登录网易云，从插件EditThisCookie中复制Coockie信息。

    3. selenium设置cookie

      import com.alibaba.fastjson.JSONArray;
import com.alibaba.fastjson.JSONObject;
import org.openqa.selenium.Cookie;

import java.util.ArrayList;
import java.util.Date;
import java.util.List;

public class Music163Cookies {
	//替换复制的COOKIES
    public static final String COOKIES = "[\n" +
            "{\n" +
            "    \"domain\": \".163.com\",\n" +
            "    \"expirationDate\": 1752132253.397857,\n" +
            "    \"hostOnly\": false,\n" +
            "    \"httpOnly\": false,\n" +
            "    \"name\": \"_ntes_nnid\",\n" +
            "    \"path\": \"/\",\n" +
            "    \"sameSite\": \"unspecified\",\n" +
            "    \"secure\": false,\n" +
            "    \"session\": false,\n" +
            "    \"storeId\": \"0\",\n" +
            "    \"value\": \",1717572253397\",\n" +
            "    \"id\": 1\n" +
            "},\n" +
            "{\n" +
            "    \"domain\": \".163.com\",\n" +
            "    \"expirationDate\": 1752132253.398033,\n" +
            "    \"hostOnly\": false,\n" +
            "    \"httpOnly\": false,\n" +
            "    \"name\": \"_ntes_nuid\",\n" +
            "    \"path\": \"/\",\n" +
            "    \"sameSite\": \"unspecified\",\n" +
            "    \"secure\": false,\n" +
            "    \"session\": false,\n" +
            "    \"storeId\": \"0\",\n" +
            "    \"value\": \"\",\n" +
            "    \"id\": 2\n" +
            "},\n" +
            "{\n" +
            "    \"domain\": \".163.com\",\n" +
            "    \"expirationDate\": 1748918432.886641,\n" +
            "    \"hostOnly\": false,\n" +
            "    \"httpOnly\": false,\n" +
            "    \"name\": \"NTES_P_UTID\",\n" +
            "    \"path\": \"/\",\n" +
            "    \"sameSite\": \"no_restriction\",\n" +
            "    \"secure\": true,\n" +
            "    \"session\": false,\n" +
            "    \"storeId\": \"0\",\n" +
            "    \"value\": \"|1717382433\",\n" +
            "    \"id\": 3\n" +
            "},\n" +
            "{\n" +
            "    \"domain\": \".163.com\",\n" +
            "    \"expirationDate\": 1751942432.898526,\n" +
            "    \"hostOnly\": false,\n" +
            "    \"httpOnly\": false,\n" +
            "    \"name\": \"nts_mail_user\",\n" +
            "    \"path\": \"/\",\n" +
            "    \"sameSite\": \"unspecified\",\n" +
            "    \"secure\": false,\n" +
            "    \"session\": false,\n" +
            "    \"storeId\": \"0\",\n" +
            "    \"value\": \"@163.com:-1:1\",\n" +
            "    \"id\": 4\n" +
            "},\n" +
            "{\n" +
            "    \"domain\": \".163.com\",\n" +
            "    \"expirationDate\": 1748918432.886826,\n" +
            "    \"hostOnly\": false,\n" +
            "    \"httpOnly\": false,\n" +
            "    \"name\": \"P_INFO\",\n" +
            "    \"path\": \"/\",\n" +
            "    \"sameSite\": \"unspecified\",\n" +
            "    \"secure\": false,\n" +
            "    \"session\": false,\n" +
            "    \"storeId\": \"0\",\n" +
            "    \"value\": \"\",\n" +
            "    \"id\": 5\n" +
            "},\n" +
            "{\n" +
            "    \"domain\": \".music.163.com\",\n" +
            "    \"expirationDate\": 1718874766.040354,\n" +
            "    \"hostOnly\": false,\n" +
            "    \"httpOnly\": false,\n" +
            "    \"name\": \"__csrf\",\n" +
            "    \"path\": \"/\",\n" +
            "    \"sameSite\": \"unspecified\",\n" +
            "    \"secure\": false,\n" +
            "    \"session\": false,\n" +
            "    \"storeId\": \"0\",\n" +
            "    \"value\": \"\",\n" +
            "    \"id\": 6\n" +
            "},\n" +
            "{\n" +
            "    \"domain\": \".music.163.com\",\n" +
            "    \"expirationDate\": 1752200652.883229,\n" +
            "    \"hostOnly\": false,\n" +
            "    \"httpOnly\": false,\n" +
            "    \"name\": \"_iuqxldmzr_\",\n" +
            "    \"path\": \"/\",\n" +
            "    \"sameSite\": \"unspecified\",\n" +
            "    \"secure\": false,\n" +
            "    \"session\": false,\n" +
            "    \"storeId\": \"0\",\n" +
            "    \"value\": \"32\",\n" +
            "    \"id\": 7\n" +
            "},\n" +
            "{\n" +
            "    \"domain\": \".music.163.com\",\n" +
            "    \"expirationDate\": 1752200652.882781,\n" +
            "    \"hostOnly\": false,\n" +
            "    \"httpOnly\": false,\n" +
            "    \"name\": \"JSESSIONID-WYYY\",\n" +
            "    \"path\": \"/\",\n" +
            "    \"sameSite\": \"unspecified\",\n" +
            "    \"secure\": false,\n" +
            "    \"session\": false,\n" +
            "    \"storeId\": \"0\",\n" +
            "    \"value\": \"\",\n" +
            "    \"id\": 8\n" +
            "},\n" +
            "{\n" +
            "    \"domain\": \".music.163.com\",\n" +
            "    \"expirationDate\": 1733130756.040268,\n" +
            "    \"hostOnly\": false,\n" +
            "    \"httpOnly\": true,\n" +
            "    \"name\": \"MUSIC_U\",\n" +
            "    \"path\": \"/\",\n" +
            "    \"sameSite\": \"unspecified\",\n" +
            "    \"secure\": false,\n" +
            "    \"session\": false,\n" +
            "    \"storeId\": \"0\",\n" +
            "    \"value\": \"\",\n" +
            "    \"id\": 9\n" +
            "},\n" +
            "{\n" +
            "    \"domain\": \".music.163.com\",\n" +
            "    \"expirationDate\": 1752132252.89175,\n" +
            "    \"hostOnly\": false,\n" +
            "    \"httpOnly\": false,\n" +
            "    \"name\": \"NMTID\",\n" +
            "    \"path\": \"/\",\n" +
            "    \"sameSite\": \"unspecified\",\n" +
            "    \"secure\": false,\n" +
            "    \"session\": false,\n" +
            "    \"storeId\": \"0\",\n" +
            "    \"value\": \"00O\",\n" +
            "    \"id\": 10\n" +
            "},\n" +
            "{\n" +
            "    \"domain\": \".music.163.com\",\n" +
            "    \"expirationDate\": 1752201142.078239,\n" +
            "    \"hostOnly\": false,\n" +
            "    \"httpOnly\": false,\n" +
            "    \"name\": \"ntes_kaola_ad\",\n" +
            "    \"path\": \"/\",\n" +
            "    \"sameSite\": \"unspecified\",\n" +
            "    \"secure\": false,\n" +
            "    \"session\": false,\n" +
            "    \"storeId\": \"0\",\n" +
            "    \"value\": \"1\",\n" +
            "    \"id\": 11\n" +
            "},\n" +
            "{\n" +
            "    \"domain\": \".music.163.com\",\n" +
            "    \"expirationDate\": 1752132256.818032,\n" +
            "    \"hostOnly\": false,\n" +
            "    \"httpOnly\": false,\n" +
            "    \"name\": \"sDeviceId\",\n" +
            "    \"path\": \"/\",\n" +
            "    \"sameSite\": \"unspecified\",\n" +
            "    \"secure\": false,\n" +
            "    \"session\": false,\n" +
            "    \"storeId\": \"0\",\n" +
            "    \"value\": \"YD%2Fk6IdX0cERX\",\n" +
            "    \"id\": 12\n" +
            "},\n" +
            "{\n" +
            "    \"domain\": \".music.163.com\",\n" +
            "    \"expirationDate\": 1752201143.105386,\n" +
            "    \"hostOnly\": false,\n" +
            "    \"httpOnly\": false,\n" +
            "    \"name\": \"WEVNSM\",\n" +
            "    \"path\": \"/\",\n" +
            "    \"sameSite\": \"strict\",\n" +
            "    \"secure\": false,\n" +
            "    \"session\": false,\n" +
            "    \"storeId\": \"0\",\n" +
            "    \"value\": \"1.0.0\",\n" +
            "    \"id\": 13\n" +
            "},\n" +
            "{\n" +
            "    \"domain\": \".music.163.com\",\n" +
            "    \"expirationDate\": 1752132255.2275,\n" +
            "    \"hostOnly\": false,\n" +
            "    \"httpOnly\": false,\n" +
            "    \"name\": \"WNMCID\",\n" +
            "    \"path\": \"/\",\n" +
            "    \"sameSite\": \"strict\",\n" +
            "    \"secure\": false,\n" +
            "    \"session\": false,\n" +
            "    \"storeId\": \"0\",\n" +
            "    \"value\": \"0\",\n" +
            "    \"id\": 14\n" +
            "},\n" +
            "{\n" +
            "    \"domain\": \"music.163.com\",\n" +
            "    \"expirationDate\": 1749108256,\n" +
            "    \"hostOnly\": true,\n" +
            "    \"httpOnly\": false,\n" +
            "    \"name\": \"__snaker__id\",\n" +
            "    \"path\": \"/\",\n" +
            "    \"sameSite\": \"unspecified\",\n" +
            "    \"secure\": false,\n" +
            "    \"session\": false,\n" +
            "    \"storeId\": \"0\",\n" +
            "    \"value\": \"\",\n" +
            "    \"id\": 15\n" +
            "},\n" +
            "{\n" +
            "    \"domain\": \"music.163.com\",\n" +
            "    \"expirationDate\": 1720175650,\n" +
            "    \"hostOnly\": true,\n" +
            "    \"httpOnly\": false,\n" +
            "    \"name\": \"gdxidpyhxdE\",\n" +
            "    \"path\": \"/\",\n" +
            "    \"sameSite\": \"unspecified\",\n" +
            "    \"secure\": false,\n" +
            "    \"session\": false,\n" +
            "    \"storeId\": \"0\",\n" +
            "    \"value\": \"\",\n" +
            "    \"id\": 16\n" +
            "},\n" +
            "{\n" +
            "    \"domain\": \"music.163.com\",\n" +
            "    \"expirationDate\": 1752132286.615827,\n" +
            "    \"hostOnly\": true,\n" +
            "    \"httpOnly\": false,\n" +
            "    \"name\": \"ntes_utid\",\n" +
            "    \"path\": \"/\",\n" +
            "    \"sameSite\": \"unspecified\",\n" +
            "    \"secure\": false,\n" +
            "    \"session\": false,\n" +
            "    \"storeId\": \"0\",\n" +
            "    \"value\": \"t\",\n" +
            "    \"id\": 17\n" +
            "},\n" +
            "{\n" +
            "    \"domain\": \"music.163.com\",\n" +
            "    \"expirationDate\": 1752132256.090159,\n" +
            "    \"hostOnly\": true,\n" +
            "    \"httpOnly\": false,\n" +
            "    \"name\": \"WM_NI\",\n" +
            "    \"path\": \"/\",\n" +
            "    \"sameSite\": \"unspecified\",\n" +
            "    \"secure\": false,\n" +
            "    \"session\": false,\n" +
            "    \"storeId\": \"0\",\n" +
            "    \"value\": \"\",\n" +
            "    \"id\": 18\n" +
            "},\n" +
            "{\n" +
            "    \"domain\": \"music.163.com\",\n" +
            "    \"expirationDate\": 1752132256.090443,\n" +
            "    \"hostOnly\": true,\n" +
            "    \"httpOnly\": false,\n" +
            "    \"name\": \"WM_NIKE\",\n" +
            "    \"path\": \"/\",\n" +
            "    \"sameSite\": \"unspecified\",\n" +
            "    \"secure\": false,\n" +
            "    \"session\": false,\n" +
            "    \"storeId\": \"0\",\n" +
            "    \"value\": \"\",\n" +
            "    \"id\": 19\n" +
            "},\n" +
            "{\n" +
            "    \"domain\": \"music.163.com\",\n" +
            "    \"expirationDate\": 1752138759.479807,\n" +
            "    \"hostOnly\": true,\n" +
            "    \"httpOnly\": false,\n" +
            "    \"name\": \"WM_TID\",\n" +
            "    \"path\": \"/\",\n" +
            "    \"sameSite\": \"unspecified\",\n" +
            "    \"secure\": false,\n" +
            "    \"session\": false,\n" +
            "    \"storeId\": \"0\",\n" +
            "    \"value\": \"\",\n" +
            "    \"id\": 20\n" +
            "}\n" +
            "]";


    public static List<Cookie> getCookies(){
        List<Cookie> cookies = new ArrayList<>();
        JSONArray jsonCookies = JSONObject.parseArray(COOKIES);
        jsonCookies.forEach(v->{
            JSONObject cookie =  (JSONObject)v;
            cookies.add(new Cookie(cookie.getString("name"),cookie.getString("value"),cookie.getString("domain"),
                    cookie.getString("path"),
                    new Date(System.currentTimeMillis() + cookie.getBigDecimal("expirationDate").longValue()),
                    cookie.getBoolean("secure"),cookie.getBoolean("httpOnly")));
        });
        return cookies;
    }
}

  8.  核心脚本代码

    import lombok.extern.slf4j.Slf4j;
import org.openqa.selenium.*;
import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.stereotype.Component;

import java.util.HashMap;
import java.util.List;
import java.util.Map;
import java.util.concurrent.TimeUnit;

@Component
@Slf4j
public class Music163 {
    @Autowired
    private WebDriver driver;

    /**
     * 查询后选择第几个搜索结果收藏
     */
    public static final Integer SEARCH_MUSIC_SELECT_NUMBER = 1;
    /**
     * 收藏时添加到第几个收藏夹
     */
    public static final Integer COLLECT_MUSIC_NUMBER = 2;

    /**
     * 获取dom元素失败后，尝试次数
     */
    public static final Integer GET_DOM_ERROR_TRY_FREQUENCY = 5;

    /**
     * 添加收藏
     *
     * @param v   歌曲信息
     * @param num 异常后循环尝试次数
     */
    public void addCollection(musicNameRead.musicOb v, int num) {
        try {
            //切换到默认iframes
            driver.switchTo().defaultContent();
            //找到右上角输入框
            WebElement inputInfo = driver.findElement(By.id("srch"));
            //清除里面内容
            inputInfo.clear();
            //设置搜索的歌曲名称
            inputInfo.sendKeys(v.getName());
            //回车查询
            inputInfo.sendKeys(Keys.ENTER);
            //切换到表单iframes
            driver.switchTo().frame("g_iframe");
            //加载完成后获取dom元素
            driver.manage().timeouts().implicitlyWait(1, TimeUnit.SECONDS);
            //获取到隐藏节点的dom元素
            WebElement srchrst = driver.findElement(By.className("n-srchrst"));
            //获取收藏dom元素
            WebElement collectBar = srchrst.findElement(By.xpath("div/div[" + SEARCH_MUSIC_SELECT_NUMBER + "]/div[3]/div/span[1]"));
            //隐藏元素需要使用js点击操作，直接用click()方法不生效
            JavascriptExecutor javascriptExecutor = (JavascriptExecutor) driver;
            javascriptExecutor.executeScript("arguments[0].click()", collectBar);
            //获取body dom元素
            WebElement body = driver.findElement(By.tagName("body"));
            //获取第几个收藏歌单的dom元素
            WebElement addCollection = body.findElement(By.xpath("div[10]/div[2]/div/div[2]/ul/li[" + COLLECT_MUSIC_NUMBER + "]"));
            //点击添加
            addCollection.click();
            log.info("添加歌曲完毕,歌曲名称：{}", v.getName());
        } catch (Exception e) {
            e.printStackTrace();
            if (num <= GET_DOM_ERROR_TRY_FREQUENCY) {
                addCollection(v, ++num);
            }
        }
    }

    public void startEvent() {
        try {
            //获取歌单信息
            List<musicNameRead.musicOb> musicInfo = musicNameRead.getMusicInfo();
            //循环操作
            musicInfo.forEach(v -> {
                addCollection(v, 0);
            });

        } catch (Exception e) {
            e.printStackTrace();
        }
    }

    public void collectMusic() {
        //先访问一次页面，以便于设置Cookie，不然会报错
        driver.get("https://music.163.com/");
        Music163Cookies.getCookies().forEach(v -> {
            driver.manage().addCookie(v);
        });
        driver.get("https://music.163.com/");
        driver.manage().timeouts().pageLoadTimeout(5, TimeUnit.SECONDS);
        startEvent();
        //关闭浏览器
        driver.quit();
    }

    /**
     * 流程开始
     */
    public void start() {
        collectMusic();
    }
}
  9. 演示效果

selenium演示效果

Fore_v_er
关注
spring boot整合selenium
weixin_45136521的博客
11-17 3937
加入maven依赖 <!-- selenium-java --> <dependency> <groupId>org.seleniumhq.selenium</groupId> <artifactId>selenium-java</artifactId> <version>${selenium.version}</version&gt.
使用Selenium进行Spring Boot集成测试
最佳 Java 编程
05-27 935
Web集成测试允许对Spring Boot应用程序进行集成测试，而无需进行任何模拟。 通过使用@WebIntegrationTest和@SpringApplicationConfiguration我们可以创建加载应用程序并在普通端口上侦听的测试。 Spring Boot的这一小增加使使用Selenium WebDriver创建集成测试变得更加容易。 测试依赖 我们将要测试的应用程序是一个...
Spring Boot集成selenium实现自动化测试
最新发布
HBLOG
08-15 1246
Selenium 是支持web 浏览器自动化的一系列工具和库的综合项目。它提供了扩展来模拟用户与浏览器的交互，用于扩展浏览器分配的分发服务器， 以及用于实现W3C WebDriver 规范 的基础结构， 该规范允许您为所有主要Web 浏览器编写可互换的代码。Selenium 不仅仅是一个工具或 API, 它还包含许多工具.
spring boot基础知识 —— springboot集成自动化测试selenium进行模拟登录,进行了单元测试(Java)
h_j_c_123的博客
09-12 1462
码云地址：https://gitee.com/hjc2/springboot.git 需要下载一个谷歌浏览器对应的驱动，我的驱动如下地址下载： http://chromedriver.storage.googleapis.com/index.html 注释很详细，直接上代码： package com.dream.bootselenium.test; import org.junit.AfterClass; import org.junit.BeforeClass; import org.juni
SpringBoot整合Selenium
冰点契约的博客
05-03 3085
SpringBoot整合Selenium package com.vmware.config; import lombok.Data; import lombok.extern.slf4j.Slf4j; import org.openqa.selenium.WebDriver; import org.openqa.selenium.chrome.ChromeDriver; import org.openqa.selenium.chrome.ChromeOptions; import org.springf
springBoot整合selenium
m0_60898924的博客
06-27 430
springBoot整合selenium及新版本可能出现的问题
java+selenium 网易云音乐刷累计听歌数的方法
08-25
java+selenium 网易云音乐刷累计听歌数的方法 通过本文，我们将学习如何使用java+selenium来刷网易云音乐的累计听歌数。这篇文章将详细介绍如何使用selenium来自动播放歌曲，达到刷累计听歌数的效果。 登录 在开始...
用selenium和BeautifulSoup爬取网易云音乐歌手id
01-20
本人正在点亮爬虫技能树，写blog以记录 selenium和bs4介绍 Selenium 自动化测试工具。它支持各种浏览器，包括 Chrome，Safari，Firefox 等主流界面式浏览器，如果你在这些浏览器里面...我们爬取页面为网易云音乐的歌
Java+spring boot+selenium+testng+reportng
12-24
需要安装的工具idea jdk1.8 (mysql,navicat) chromedriver_win32 ...如果看test包，就是用Java+spring boot+selenium+testng+reportng搭的一个测试架构 http://localhost:63342/demo/test-output/html/index.html
详解python selenium 爬取网易云音乐歌单名
09-19
### Python Selenium爬取网易云音乐歌单名详解 #### 一、引言 在Web自动化测试领域，Selenium 是一个非常强大的工具，它不仅能够帮助我们进行自动化测试，还可以用于网页爬虫。本文将详细介绍如何使用 Python 和 ...
springboot——集成selenium模拟登陆
换了马甲的小强的博客
03-19 5789
一、添加selenium依赖 <dependency> <groupId>org.seleniumhq.selenium</groupId> <artifactId>selenium-java</artifactId> <version>3.141.59</version> </dep...
弹簧依赖注入：具有Spring Boot DI（依赖注入）的Selenium自动化框架
02-04
Spring Boot依赖项注入 概要 该项目使用spring作为依赖项注入，并在测试中注入步骤，并在步骤中注入页面。 这里的哲学是：“保持简单，愚蠢”。 要求 Java 8，Junit 5，Maven 从命令行运行测试 mvn清洁测试。 或mvn clean test -Dtags = smoke 有用的链接
搭建 springboot selenium 网页文件转图片环境的详细教程
08-18
主要介绍了搭建 springboot selenium 网页文件转图片环境,本文给大家介绍的非常详细，对大家的学习或工作具有一定的参考借鉴价值，需要的朋友可以参考下
使用SpringBoot + selenium-java 做爬虫
JustHaveTry的专栏
05-09 6910
题记 最近发现了springboot本身就集成了selenium-java ，就拿来研究了一下，分布式爬虫是很大的一个架构，也比较复杂，没做研究，还是对爬虫的客户端实现有点兴趣，就想着用java做一个小爬虫客户端，其实selenium是做测试的，不过来拿来做小爬虫还是不错的，能真实模拟用户，不用担心异步加载爬取不到，还有一些元素获取不方便，更值得一提的是selenium-java 提供的元素获取的...
Selenium + SpringBoot自动化测试入门
li277的博客
06-17 9887
Selenium + SpringBoot自动化测试入门前言核心依赖配置创建Webdriver，DriverService类Page类测试类总结 前言 最近在学习spring，觉得也可以将spring运用到测试中。下面是一个简单的应用，不包含全部源码。 核心依赖 <!--springboot父项目--> <parent> <groupId&gt...
spring boot集成selenium，chromedriver 自动化测试 报错Lcom/google/common/util/concurrent/SimpleTimeLimiter
qq_43898141的博客
02-11 1755
<!--selenium 浏览器测试--> <dependency> <groupId>org.seleniumhq.selenium</groupId> <artifactId>selenium-java</artifactId> <version>3.4.0</version> </dependen.
selenium webdriver驱动
佡鹿的博客
11-28 829
selenium是什么？ 用于测试web应用程序的自动化测试框架 自动化测试概念 自动化测试技术，是以程序测试程序，以代码代替思维，以脚本的运行代替手工测试 什么是框架？： 框架（framework）是一个框子——指其约束性，也是一个架子——指其支撑性。是一个基本概念上的结构，用于去解决或者处理复杂的问题 优势 回归测试更方便可靠 可运行更多更繁琐的测试，且快速高效 可执行相对于手工来说相当困难或跟本做不到的测试 更好的利用资源，使资源的使用更有价值 自动化脚本完全具有复用性 ...
springboot集成webmagic和selenium，并部署到linux（问题坑）
qq_36249132的博客
04-23 1448
springboot集成webmagic和selenium，并部署到linux
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值