android中jsoup解析html的几个例子

最新推荐文章于 2023-05-08 22:25:01 发布
最新推荐文章于 2023-05-08 22:25:01 发布
阅读量880 收藏
点赞数
分类专栏： android开发技巧收集

1.获取百度所有链接的例子（通过ID）：

Java代码 复制代码  收藏代码
  1. public class Activity01(改成你自己的Activity) extends Activity   
  2. {   
  3.     @Override  
  4.     public void onCreate(Bundle savedInstanceState)   
  5.     {   
  6.         super.onCreate(savedInstanceState);   
  7.            
  8.         setContentView(R.layout.main);   
  9.         TextView tv = new TextView(this);   
  10.            
  11.         String myString = null;   
  12.         StringBuffer sff = new StringBuffer();//一定要new一个，我刚开始搞忘了，出不来。   
  13.         try  
  14.         {   
  15.             Document doc = Jsoup.connect("http://www.baidu.com").get();   
  16.             Elements links = doc.select("a[href]");   
  17.             //注意这里是Elements不是Element。同理getElementById返回Element，getElementsByClass返回时Elements   
  18.             for(Element link : links){   
  19.                 //这里没有什么好说的。   
  20.                 sff.append(link.attr("abs:href")).append("  ").append(link.text()).append(" ");   
  21.             }   
  22.             myString = sff.toString();   
  23.         }   
  24.         catch (Exception e)   
  25.         {   
  26.             myString = e.getMessage();   
  27.             e.printStackTrace();   
  28.         }   
  29.         /**//* 将信息设置到TextView */  
  30.         tv.setText(myString);   
  31.            
  32.         /**//* 将TextView显示到屏幕上 */  
  33.         this.setContentView(tv);   
  34.     }   
  35. }  
public class Activity01(改成你自己的Activity) extends Activity
{
    @Override
    public void onCreate(Bundle savedInstanceState)
    {
        super.onCreate(savedInstanceState);
        
        setContentView(R.layout.main);
        TextView tv = new TextView(this);
        
        String myString = null;
        StringBuffer sff = new StringBuffer();//一定要new一个，我刚开始搞忘了，出不来。
        try
        {
            Document doc = Jsoup.connect("http://www.baidu.com").get();
            Elements links = doc.select("a[href]");
			//注意这里是Elements不是Element。同理getElementById返回Element，getElementsByClass返回时Elements
            for(Element link : links){
				//这里没有什么好说的。
                sff.append(link.attr("abs:href")).append("  ").append(link.text()).append(" ");
            }
            myString = sff.toString();
        }
        catch (Exception e)
        {
            myString = e.getMessage();
            e.printStackTrace();
        }
        /**//* 将信息设置到TextView */
        tv.setText(myString);
        
        /**//* 将TextView显示到屏幕上 */
        this.setContentView(tv);
    }
}

 2.获取news.cqu.edu.cn中class为topnews 的新闻标题。

Java代码 复制代码  收藏代码
  1. package huxiaoan.cqu.praseHtml;   
  2.   
  3. import org.jsoup.Jsoup;   
  4. import org.jsoup.nodes.Document;   
  5. import org.jsoup.nodes.Element;   
  6. import org.jsoup.select.Elements;   
  7.   
  8. import android.app.Activity;   
  9. import android.os.Bundle;   
  10. import android.widget.TextView;   
  11.   
  12. public class HtmlActivity extends Activity {   
  13.     @Override  
  14.     public void onCreate(Bundle savedInstanceState) {   
  15.         super.onCreate(savedInstanceState);   
  16.         setContentView(R.layout.main);   
  17.   
  18.         TextView tv = (TextView) findViewById(R.id.out);   
  19.         String myString = new String();   
  20.   
  21.         try {   
  22.             Document doc = Jsoup.connect("http://news.cqu.edu.cn").get();   
  23.             //Elements   
  24.             Elements topnews = doc.getElementsByClass("topnews");   
  25.             //Elements   
  26.             Elements links = topnews.select("a[href]");   
  27.             for (Element link : links) {   
  28.                 myString+=link.text();   
  29.                 myString+="\n";   
  30.             }   
  31.                
  32.         } catch (Exception e) {   
  33.   
  34.             myString = e.getMessage();   
  35.             e.printStackTrace();   
  36.         }   
  37.         /* 将信息设置到TextView */  
  38.         tv.setText(myString);   
  39.   
  40.     }   
  41. }  
package huxiaoan.cqu.praseHtml;

import org.jsoup.Jsoup;
import org.jsoup.nodes.Document;
import org.jsoup.nodes.Element;
import org.jsoup.select.Elements;

import android.app.Activity;
import android.os.Bundle;
import android.widget.TextView;

public class HtmlActivity extends Activity {
	@Override
	public void onCreate(Bundle savedInstanceState) {
		super.onCreate(savedInstanceState);
		setContentView(R.layout.main);

		TextView tv = (TextView) findViewById(R.id.out);
		String myString = new String();

		try {
			Document doc = Jsoup.connect("http://news.cqu.edu.cn").get();
			//Elements
			Elements topnews = doc.getElementsByClass("topnews");
			//Elements
			Elements links = topnews.select("a[href]");
			for (Element link : links) {
				myString+=link.text();
				myString+="\n";
			}
			
		} catch (Exception e) {

			myString = e.getMessage();
			e.printStackTrace();
		}
		/* 将信息设置到TextView */
		tv.setText(myString);

	}
}

 3.利用session连续获取多个页面。即保持会话。

Java代码 复制代码  收藏代码
  1. package huxiaoan.cqu.praseHtml;   
  2.   
  3. import java.util.Iterator;   
  4. import java.util.Map;   
  5. import java.util.Map.Entry;   
  6.   
  7. import org.jsoup.Connection;   
  8. import org.jsoup.Connection.Response;   
  9. import org.jsoup.Jsoup;   
  10. import org.jsoup.nodes.Document;   
  11. import org.jsoup.nodes.Element;   
  12. import org.jsoup.select.Elements;   
  13.   
  14. import android.app.Activity;   
  15. import android.os.Bundle;   
  16. import android.widget.TextView;   
  17.   
  18. public class HtmlActivity extends Activity {   
  19.     @Override  
  20.     public void onCreate(Bundle savedInstanceState) {   
  21.         super.onCreate(savedInstanceState);   
  22.         setContentView(R.layout.main);   
  23.   
  24.         TextView tv = (TextView) findViewById(R.id.out);   
  25.         String myString = new String();   
  26.         String sessionid = new String();   
  27.         try {   
  28.             // 登录获取sessionid   
  29.             Connection con = Jsoup.connect("http://www.jwc.cqu.edu.cn/login.asp")   
  30.                     .data("username", "000")   
  31.                     .data("password", "000");   
  32.             con.post();    
  33.             sessionid = con.response().cookie("ASPSESSIONIDCCSTRTQS");   
  34.             // 查询课表(利用读取到的session值，可以实现保持会话，连续请求了。)   
  35.             Connection con_query = Jsoup   
  36.                     .connect("http://www.jwc.cqu.edu.cn/PlanAndCurriculum/cour_tab_sel_stud.ASP")   
  37.                     .cookie("ASPSESSIONIDCCSTRTQS", sessionid);   
  38.             // 读取内容   
  39.             Document doc = con_query.get();   
  40.             Elements fonts = doc.getElementsByTag("b");   
  41.             for (Element font : fonts) {   
  42.                 myString += font.text();   
  43.             }   
  44.         } catch (Exception e) {   
  45.             myString = e.getMessage();   
  46.             e.printStackTrace();   
  47.         }   
  48.         /* 将信息设置到TextView */  
  49.         tv.setText(myString);   
  50.   
  51.     }   
  52. }  
package huxiaoan.cqu.praseHtml;

import java.util.Iterator;
import java.util.Map;
import java.util.Map.Entry;

import org.jsoup.Connection;
import org.jsoup.Connection.Response;
import org.jsoup.Jsoup;
import org.jsoup.nodes.Document;
import org.jsoup.nodes.Element;
import org.jsoup.select.Elements;

import android.app.Activity;
import android.os.Bundle;
import android.widget.TextView;

public class HtmlActivity extends Activity {
	@Override
	public void onCreate(Bundle savedInstanceState) {
		super.onCreate(savedInstanceState);
		setContentView(R.layout.main);

		TextView tv = (TextView) findViewById(R.id.out);
		String myString = new String();
		String sessionid = new String();
		try {
			// 登录获取sessionid
			Connection con = Jsoup.connect("http://www.jwc.cqu.edu.cn/login.asp")
					.data("username", "000")
					.data("password", "000");
			con.post();	
			sessionid = con.response().cookie("ASPSESSIONIDCCSTRTQS");
			// 查询课表(利用读取到的session值，可以实现保持会话，连续请求了。)
			Connection con_query = Jsoup
					.connect("http://www.jwc.cqu.edu.cn/PlanAndCurriculum/cour_tab_sel_stud.ASP")
					.cookie("ASPSESSIONIDCCSTRTQS", sessionid);
			// 读取内容
			Document doc = con_query.get();
			Elements fonts = doc.getElementsByTag("b");
			for (Element font : fonts) {
				myString += font.text();
			}
		} catch (Exception e) {
			myString = e.getMessage();
			e.printStackTrace();
		}
		/* 将信息设置到TextView */
		tv.setText(myString);

	}
}

 这个例子经过我无数次的测试，经常出现读不到session值的情况。耽误了我很长一段时间。

找了各种英文网站，找到了一种解决办法，我不知道以后还会不会出现问题 。解决方法是，把所有cookie的值都读出来。

Java代码 复制代码  收藏代码
  1. Connection.Response res = Jsoup.connect("http://www.jwc.cqu.edu.cn/login.asp")   
  2.         .data("username", "000","password", "000")   
  3.         .method(Method.POST)   
  4.         .execute();   
  5. Map<String, String> cookies = res.cookies();   
  6. //如果需要 Document doc1 = res.parse();   
  7. Connection connection = Jsoup.connect("http://www.jwc.cqu.edu.cn/PlanAndCurriculum/cour_tab_sel_stud.ASP");   
  8. for (Entry<String, String> cookie : cookies.entrySet()) {   
  9.     connection.cookie(cookie.getKey(), cookie.getValue());   
  10. }   
  11. Document doc = connection.get();  
Connection.Response res = Jsoup.connect("http://www.jwc.cqu.edu.cn/login.asp")
		.data("username", "000","password", "000")
		.method(Method.POST)
		.execute();
Map<String, String> cookies = res.cookies();
//如果需要 Document doc1 = res.parse();
Connection connection = Jsoup.connect("http://www.jwc.cqu.edu.cn/PlanAndCurriculum/cour_tab_sel_stud.ASP");
for (Entry<String, String> cookie : cookies.entrySet()) {
	connection.cookie(cookie.getKey(), cookie.getValue());
}
Document doc = connection.get();

 

mypanlong
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Android中Jsoup的使用(网页内容解析)
qq_37039178的博客
06-02 2063
文章目录JSoup在安卓中的应用场景举例相关基础知识简述HTML简述HTTP请求与响应的内容格式JSoup的网页解析功能与API介绍JSoup的HTTP相关操作介绍JSoup实例实例一：使用jsoup解析HTML格式的字符串实例二：使用jsoup爬取[福建师范大学官网首页](http://www.fjnu.edu.cn)的所有文章链接实例三：使用jsoup与服务器进行数据交互 JSoup在安卓中的...
Android开发一大神器——Jsoup.pdf
09-22
Android开发一大神器——Jsoup.pdf
【Android入门到项目实战-- 10.1】—— jsoup的详细使用教程
张修宇的博客
05-08 2546
Android，jsoup的详细教程，jsoup可以实现爬虫效果，获取网页文字、图片、视频等。如何使用jsoup提取网页文字和图片？爬取文字和图片。
Jsoup在Android的使用（一）
热门推荐
zhaojun的博客
08-25 2万+
Jsoup是一款Java的html解析工具。Jsoup可能有一些同学不知道，但是，网络爬虫大家或多或少地都有些耳闻吧？网络爬虫是什么？网络爬虫是一种自动爬取网页内容的程序，可以轻松爬取图文、视频等信息。说起网络爬虫，用的更多的还是python爬虫。在几个月之前，我也体验过python爬虫程序，真是简单又强大。而我们接下来要说的Jsoup，则是Java的爬虫工具。 一.为什么使用J...
android爬虫框架jsoup,Android基于Jsoup的网络爬虫
weixin_39620370的博客
05-31 915
一、浅谈网络爬虫​随着网络的迅速发展,互联网成为大量信息的载体，如何有效的利用这些信息成为巨大的挑战。区别于搜索引擎，定向抓取相关网页资源的网络爬虫应用而生，可以根据既定的抓取目标有效的选择网络上需要的网页资源和信息。如用户想获得知乎豆瓣等网站上的主要数据进行分析，如用户想获得某个论坛贴吧内的所有图片等，把这项工作交给网络爬虫，可以大大提高人们的效率。二、Jsoup简介Jsoup是一个 Java ...
Android-jsoup爬虫
qq_36050563的博客
11-23 999
Android Jsoup爬虫 ​ 最近项目中需要用到一些数据，苦于没有数据源。在网上各种搜罗爬虫的第三方工具：火车头、八爪鱼这些都不太理想，偶然间发现github上有一个java开源的项目“jsoup”利用java代码去操作网页的元素，感觉可行。今天就给大家带来在android中如何使用jsoup爬虫的教程。 1.新建android工程，导入jsoup包 1.首先将jsoup的包下载下来，他是以jar包的形式提供的，也可以使用依赖的方式（这里我是用jar的形式）。下载地址：https://jso
Android使用Jsoup解析Html表格的方法
09-03
主要介绍了Android使用Jsoup解析Html表格的方法,涉及Android中Jsoup的使用技巧,具有一定参考借鉴价值,需要的朋友可以参考下
手把手教学Android用jsoup解析html实例
08-30
本篇文章主要介绍了手把手教学Android用jsoup解析html实例，jsoup 是一款Java 的HTML解析器。具有一定的参考价值，感兴趣的小伙伴们可以参考一下
利用jsoup解析html
12-22
　（1）从一个 URL，文件或字符串中解析HTML； 　（2）使用DOM或CSS选择器来查找、取出数据； 　（3）可操作HTML元素、属性、文本； 　2、maven配置 　<!– jsoup –> 　 　<groupId>org.jsoup 　...
Jsoup在Android的使用（二）获取简书文章
zhaojun的博客
08-28 2万+
这篇博客延迟很久了，因为前段时间有很多杂事琐事处理。这个周末，暂时没什么事情。把Jsoup在Android的使用总结一下。自己平时喜欢写点小的应用，最近写的小应用也使用到了Jsoup。上篇文章我们简单介绍了一下Jsoup，并且知道了如何使用Jsoup与想要爬取的链接建立连接。今天，我将以一个实际的小项目总结一下如何使用Jsoup爬取简书主页的文章。学会了这个小项目后，你基本可以使用...
Android开发笔记：用Jsoup简单获取网页的数据
Tai_Monster的博客
11-13 2084
由于Android系统不允许我们在主线程中进行网络通信，所以我们开启一个线程，并。
使用Jsoup解析HTML数据的Demo
07-29
这是使用Jsoup解析HTML得到数据的一个小例子，具体的使用方法请参见我的博客：http://blog.csdn.net/ProgramChangesWorld/article/details/47134255
Jsoup解析html的示例
04-22
一个简单地android解析html的例子
android jsoup简书,Jsoup学习及使用
weixin_33618737的博客
05-31 748
* Jsoup：jsoup 是一款Java 的HTML解析器，可直接解析某个URL地址、HTML文本内容。它提供了一套非常省力的API，可通过DOM，CSS以及类似于jQuery的操作方法来取出和操作数据。* 快速入门：* 步骤：1. 导入jar包2. 获取Document对象3. 获取对应的标签Element对象4. 获取数据* 代码：//2.1获取student.xml的pathString ...
android爬虫框架jsoup,Android爬虫之Jsoup
weixin_33764387的博客
05-31 346
最近做了个获取Kindle特价书的app(https://www.coolapk.com/apk/167660)，使用了jsoup来解析亚马逊的html代码，觉得很强大，遂分享一下。如图：效果1、Jsoup介绍jsoup 是一款Java 的HTML解析器，可直接解析某个URL地址、HTML文本内容。它提供了一套非常省力的API，可通过DOM，CSS以及类似于jQuery的操作方法来取出和操作数据。...
android爬虫框架jsoup,Android笔记之JSoup爬虫入门
weixin_39720865的博客
05-31 299
前言闲扯一些没用的，写这篇文章之前是有点私心的，因为之前评论某简书大v的文章是鸡汤，瞬间被拉黑，连个解释和说明的机会都没有，文章语言干涩，内容平平，于是就好奇到底是些什么样的人喜欢和吹捧这样的鸡汤作者。所谓技术可以解惑答疑，所以我就爬来了该作者的所有的文章，每篇文章的阅读数，赞数，评论数，赞赏数，赞赏者，评论者，入选的专题。通过阅读数，赞数，评论数，赞赏数可以看出该作者的热度曲线，以及未来趋势。通...
Jsoup 在 Android 中的尝试
非也缘也的博客
07-20 445
Jsoup 是一款 Java 的 HTML 解析工具，主要是对 HTML 和 XML 文件进行解析。所以，对 JS 动态生成内容的支持并不好。 如果想解析 HTML，因为不同网站的情况不同，一些简单的网站可以通过下面的方法尝试（复杂的我也还不会）。 具体解析要依据网站的结构，如果对前端有些了解大概能更好理解。 HTML 解析 首先添加依赖： implementation 'org.jsoup:jsoup:1.14.1' 第一种方式： 通过 Jsoup.connect 的方式来解析 private.
jsoup解析html
最新发布
06-03
JSoup是Java语言的一个HTML解析器，它可以方便地从HTML文档中提取数据。 使用JSoup解析HTML的基本步骤如下： 1. 导入JSoup的jar包。 2. 创建一个Document对象，该对象表示整个HTML文档。 ```java Document doc =...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值