使用jsoup 抓取 汇率网站信息

• 最近公司有个业务需求，需要进行币别的兑换。因为汇率每一日都是变化的，得在实时的去抓取当日的汇率进行换算。虽然也发现有api接口能完成需求，但是还是觉得自己去获取某个页面的汇率信息比较靠谱，最终也采用jsoup去抓取汇率的信息。

pom.xml加入依赖

       <dependency>
        <groupId>org.jsoup</groupId>
        <artifactId>jsoup</artifactId>
        <version>1.11.2</version>
    </dependency>

选择dbs作为获取信息的来源

 private static final String FX_RATE_HSBC_URL = "https://hk.dbs.com/ecPortalWeb/Rates/ExchangeRate.aspx?Lang=en-us";

构建Dom树

 /**
 * 根据URL获取Dom树
 */

private static Document request(String url) throws IOException {
    Document document = Jsoup.connect(url).timeout(CONNECT_TIME_OUT).get();
    System.out.println(document.toString());
    return document;
}

dom树包含的是页面的html信息，之后我们可以从这个信息从获取自己需要的内容
如：我们要获取页面中的更新时间
![在这里插入图片描述](https://img-blog.csdnimg.cn/20200428171852589.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2xpYW9zaWxlaTA5Mjc=,size_16,color_FFFFFF,t_70)

可以直接的定位到时间id标识上

//汇率时间
String dateStr = document.select("#lblLastUpdate").text();

比如需要获取人民比兑换美元的汇率
从document中选择的写法是

Elements elements = document.select("table tr td:matchesOwn(CNY(OnShore)),table tr td:matchesOwn(CNY(OffShore))");

table tr td:matchesOwn(CNY) 的意思是选择table中所以tr行中td列内容中包含CNY字符的内容
获取到后既可得到整的数据，之后便可以取出text文本数据进行处理