
爬虫
Joker_Ye
此人很懒,不要催更
展开
-
【Java】Jsoup使用选择器语法来查找元素
问题 你想使用类似于CSS或jQuery的语法来查找和操作元素。 方法 可以使用方法实现:Element.select(String selector) File input = new File("/tmp/input.html"); Document doc = Jsoup.parse(input, "UTF-8", "http://example.com/"); Elements...原创 2018-11-29 18:22:48 · 1848 阅读 · 0 评论 -
【Java】Jsoup解析一个body片断优化爬虫速度
解析一个body片断 问题 假如你有一个HTML片断 (比如. 一个 div 包含一对 p 标签; 一个不完整的HTML文档) 想对它进行解析。这个HTML片断可以是用户提交的一条评论或在一个CMS页面中编辑body部分。 办法 使用方法.Jsoup.parseBodyFragment(String html) String html = "<div><p>Lo...原创 2018-11-29 18:29:16 · 1340 阅读 · 0 评论 -
【Java】Jsoup处理URLs
问题 你有一个包含相对URLs路径的HTML文档,需要将这些相对路径转换成绝对路径的URLs。 方法 在你解析文档时确保有指定base URI,然后 使用 abs: 属性前缀来取得包含base URI的绝对路径。代码如下: Document doc = Jsoup.connect("http://www.baidu.com").get(); Element link = doc.se...原创 2018-11-29 18:35:39 · 335 阅读 · 0 评论