java网络爬虫实验报告_Java网络爬虫实操（6）

大家好，前几篇文章一直提到用xpath去解析html。由于是演示代码，所以看上去都简洁明了的。其实在生产环境下，我们需要获取的数据往往不是一点点，如何让获取数据的代码写的更加清晰、优雅呢？

本篇文章尝试用注解的方式实现一下，大家看看是否好一点。

1) 目标

随便找一个网站，获取上面列表类的数据

目标数据的界面

2) 之前的解析类

在process方法中围绕我们想要的数据，努力去定位、查找

package com.cv4j.netdiscovery.example;

import com.cv4j.netdiscovery.core.domain.Page;

import com.cv4j.netdiscovery.core.parser.Parser;

import java.util.List;

public class TestParser implements Parser {

@Override

public void process(Page page) {

//最新网申

List newApplyList = page.getHtml().xpath("//dl[@id='dlFull']/dd/div/div/p[@title]/a/text()").all();

page.getResultItems().put("newApplyList", newApplyList);