Jsoup报HTTP error fetching URL. Status=403, URL＝。。。

最新推荐文章于 2022-04-11 22:48:33 发布
最新推荐文章于 2022-04-11 22:48:33 发布
阅读量1.1w 收藏 2
点赞数 2
分类专栏： Java
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/a1610770854/article/details/52065037
版权

有些网站对这种访问会采取限制措施，所以需要将浏览器伪装成浏览器来访问网站。

代码如下：

Jsoup.connect("http://v.ku6.com/show/FT4oJ3DNgAatXPdUuC2QWA...html")
.userAgent("Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.31 (KHTML, like Gecko) Chrome/26.0.1410.64 Safari/537.31");



林花谢了春红
关注
  • 2
    点赞
  • 踩
  • 2
    收藏
    觉得还不错? 一键收藏
  • 2
    评论
专栏目录
jsoup-1.14.3-bin.zip
12-23
jsoup是一个用于处理现实世界 HTML 的 Java 库。它使用最好的 HTML5 DOM 方法和 CSS 选择器提供了一个非常方便的 API，用于获取 URL 以及提取和操作数据。
org.jsoup.HttpStatusException: HTTP error fetching URL. Status=403 爬取网站出现403错误
热门推荐
qqnbsp的博客
10-17 2万+
爬取网站的时候 conn = Jsoup.connect(url).timeout(5000).get();直接用get方法，有些网站可以正常爬取。 但是有些网站报403错误，403是一种在网站访问的过程中，常见的错误提示。表示资源不可用，服务器理解客户对的请求，但是拒绝处理它，通常由服务器上文件或者目录的权限设置导致的web访问错误。 解决方法无非就是从这几个角度：useragent
Jsoup 爬取页面的数据和 理解HTTP消息头
千丈之松的专栏
10-22 8925
推荐一本书：黑客攻防技术宝典.Web实战篇 ； 顺便留下一个疑问：是否能通过jsoup大量并发访问web或者小型域名服务器，使其瘫痪？其实用jsoup熟悉的朋友可以用它解析url来干一件很无耻的事（源码保密）。呵呵，接下来简单的介绍下JSOUP。 jsoup 是一款基于Java 的HTML解析器，可直接解析某个URL地址、HTML文本字符串、HTML文件。它提供了一套非常省力的API，可通过DOM，CSS以及类似于jQuery的操作方法来取出和操作数据。 官网下载地址：h
JsoupXpath-0.3.2.jar.rar
11-27
JsoupXpath-0.3.2.jar.rar
基于SSM+maven+httpClient+jsoup实现小说网站项目源码.zip
最新发布
01-09
【资源说明】 1、该资源包括项目的全部源码，下载可以直接使用！ 2、本项目适合作为计算机、数学、电子信息等专业的课程设计、期末大作业和毕设项目，作为参考资料学习借鉴。 3、本资源作为“参考资料”如果需要实现其他功能，需要能看懂代码，并且热爱钻研，自行调试。 基于SSM+maven+httpClient+jsoup实现小说网站项目源码.zip 基于SSM+maven+httpClient+jsoup实现小说网站项目源码.zip 基于SSM+maven+httpClient+jsoup实现小说网站项目源码.zip 基于SSM+maven+httpClient+jsoup实现小说网站项目源码.zip 基于SSM+maven+httpClient+jsoup实现小说网站项目源码.zip 基于SSM+maven+httpClient+jsoup实现小说网站项目源码.zip 基于SSM+maven+httpClient+jsoup实现小说网站项目源码.zip 基于SSM+maven+httpClient+jsoup实现小说网站项目源码.zip 基于SSM+maven+httpClient+jsoup实现小说网站项目源码.zip 基于SSM+maven+httpClient+jsoup实现小说网站项目源码.zip 基于SSM+maven+httpClient+jsoup实现小说网站项目源码.zip 基于SSM+maven+httpClient+jsoup实现小说网站项目源码.zip 基于SSM+maven+httpClient+jsoup实现小说网站项目源码.zip 基于SSM+maven+httpClient+jsoup实现小说网站项目源码.zip 基于SSM+maven+httpClient+jsoup实现小说网站项目源码.zip 基于SSM+maven+httpClient+jsoup实现小说网站项目源码.zip 基于SSM+maven+httpClient+jsoup实现小说网站项目源码.zip 基于SSM+maven+httpClient+jsoup实现小说网站项目源码.zip 基于SSM+maven+httpClient+jsoup实现小说网站项目源码.zip 基于SSM+maven+httpClient+jsoup实现小说网站项目源码.zip 基于SSM+maven+httpClient+jsoup实现小说网站项目源码.zip 基于SSM+maven+httpClient+jsoup实现小说网站项目源码.zip 基于SSM+maven+httpClient+jsoup实现小说网站项目源码.zip 基于SSM+maven+httpClient+jsoup实现小说网站项目源码.zip 基于SSM+maven+httpClient+jsoup实现小说网站项目源码.zip 基于SSM+maven+httpClient+jsoup实现小说网站项目源码.zip 基于SSM+maven+httpClient+jsoup实现小说网站项目源码.zip 基于SSM+maven+httpClient+jsoup实现小说网站项目源码.zip 基于SSM+maven+httpClient+jsoup实现小说网站项目源码.zip 基于SSM+maven+httpClient+jsoup实现小说网站项目源码.zip 基于SSM+maven+httpClient+jsoup实现小说网站项目源码.zip 基于SSM+maven+httpClient+jsoup实现小说网站项目源码.zip 基于SSM+maven+httpClient+jsoup实现小说网站项目源码.zip 基于SSM+maven+httpClient+jsoup实现小说网站项目源码.zip 基于SSM+maven+httpClient+jsoup实现小说网站项目源码.zip 基于SSM+maven+httpClient+jsoup实现小说网站项目源码.zip 基于SSM+maven+httpClient+jsoup实现小说网站项目源码.zip 基于SSM+maven+httpClient+jsoup实现小说网站项目源码.zip 基于SSM+maven+httpClient+jsoup实现小说网站项目源码.zip 基于SSM+maven+httpClient+jsoup实现小说网站项目源码.zip 基于SSM+maven+httpClient+jsoup实现小说网站项目源码.zip 基于SSM+maven+httpClient+jsoup实现小说网站项目源码.zip 基于SSM+maven+httpClient+jsoup实现小说网站项目源码.zip 基于SSM+maven+httpClien
org.jsoup.HttpStatusException: HTTP error fetching URL. Status=403
weixin_33724570的博客
05-17 1272
爬取网站的时候 conn = Jsoup.connect(url).timeout(5000).get();直接用get方法，有些网站可以正常爬取。 但是有些网站报403错误，403是一种在网站访问的过程中，常见的错误提示。表示资源不可用，服务器理解客户对的请求，但是拒绝处理它，通常由服务器上文件或者目录的权限设置导致的web访问错误。   解决方法无非就是从这几个角度：useragent,ref...
使用 org.jsoup.HttpStatusException: HTTP error fetching URL. Status=403 无法获取页面错误. 为什么高手赐教!
04-06 1475
网上找到这个问题的答案多是,要模拟浏览器. 可是 有个网站我模拟了还是有错误? 为什么 String url="https://pixabay.com/videos/"; //通过 解析 xml 文本 // Connection conn = Jsoup.connect(url).timeout(5000); /...
使用Jsoup简单的爬取关于疫情的数据——从官网取数据（已夭折）。夭折原因与问题分析
qq_39688441的博客
04-11 916
一、写这玩意的起因 因为疫情，每天手机时不时的推送零零散散的消息，有时候想看吧，又得去查，所以就想自己抽空爬一点数据，按照自己的习惯来看他，想怎么对比也方便自己。而且自己最近也不是太忙。 这里呢，希望得到真实官方的有效数据，所以打算从官方的页面获取数据。我想，我不会去频繁调用，就不会给网站添麻烦。获取数据主要目的也不是为了获利，主要是为了方便自己看和给朋友分享，再说了，我也只是拿本就公开让人看的数据。这样应该不会有麻烦吧。 二、开始建项目 1.首先呢，咱得有个sp...
jsoup 403 错误原因 及 总结
huaishuming的专栏
11-12 8307
参考网址 ：中文http://www.open-open.com/jsoup/ 官方：
jsoup post方式请求接口错误“HTTP error fetching URL. Status=400”解决方法
wh445306
01-17 7990
Exception in thread "main" org.jsoup.HttpStatusException: HTTP error fetching URL. Status=400, URL=“xxxxxxx” 折腾了很久才找到解决方法： .ignoreContentType(true) .ignoreHttpErrors(true) 添加上面两个属性问题解决！get()的时候一般不会有问题，但是如果你是post方式提交数据到接口，报错的概率相当高，建议 不管是post,还是get，均开
jsoup jar包......
09-12
自己需要来解析html来方便数据获取，本来想直接在csdn上下载一个，看见一个竟然要8积分，好坑，积分这东东，哎 ，就在官网下载了一个，大家不方便在官网下载的，可以下载看看
jsoup-1.15.3.jar
11-11
jsoup-1.15.3.jar,jsoup-1.15.3.jar,jsoup-1.15.3.jar,jsoup-1.15.3.jar,jsoup-1.15.3.jar,jsoup-1.15.3.jar,jsoup-1.15.3.jar,jsoup-1.15.3.jar，jsoup-1.15.3.jar，jsoup-1.15.3.jar，jsoup-1.15.3.jarjsoup-1.15.3.jarjsoup-1.15.3.jar，jsoup-1.15.3.jar，jsoup-1.15.3.jar，jsoup-1.15.3.jar，jsoup-1.15.3.jar，jsoup-1.15.3.jarjsoup-1.15.3.jar，jsoup-1.15.3.jar，jsoup-1.15.3.jar，jsoup-1.15.3.jar，jsoup-1.15.3.jar，jsoup-1.15.3.jar，jsoup-1.15.3.jar，jsoup-1.15.3.jar，jsoup-1.15.3.jar，jsoup-1.15.3.jar，jsoup-1.15.3.jar，jsoup-1.15
Jsoup 模拟jenkins登录 HTTP error fetching URL. Status=403, URL=https://jenkins.xxx:10012/jenkins/
隔壁老瓦的专栏
01-21 1100
err: org.jsoup.HttpStatusException: HTTP error fetching URL. Status=403, URL=https://jenkins.xxx:10012/jenkins/ at org.jsoup.helper.HttpConnection$Response.execute(HttpConnection.java:760) at ...
爬虫 url error : HTTP 403 Forbidden
H华华的博客
10-26 8018
用Jsoup爬取内容的时候，　一开始的程序，不知道怎么回事，线程应该也不是问题，频繁出现 Http  403 Forbidden . 在提交请求get 或者post 的时候，也都加了headers ，不过还是大量抛出403 异常； 解决方法： http://blog.csdn.net/shomy_liu/article/details/38269281
网络爬虫-HTTP error fetching URL. Status=403
weixin_30507481的博客
07-11 2673
org.jsoup.HttpStatusException: HTTP error fetching URL. Status=403, URL=http://xxxx.com/xxx/xxx/xxx.html （网络爬虫）解决办法： 设置下userAgent，伪装成浏览器就可以了Jsoup.connect("<span style="line-height: 1.5; font-size...
java爬虫，破解JS加密的Cookie
bohu83的博客
09-25 9817
一 序： 因为爬取数据需要，代理跟验证码识别属于不可避免的问题。本文总结了下因为爬取免费代理IP数据遇到的js加密cookie问题。 二 问题： 对于常见的静态页面来说，jsoup的解析是比较常见的。 但是这个网站如果直接用jsoup去抓取，会报错。 org.jsoup.HttpStatusException: HTTP error fetching URL. Status=52
解决Jsoup 访问 https协议网站时产生connect reset错误
ningzhao的专栏
07-28 5571
一、问题现象 1.通过jsoup访问https://www.xncx.gov.cn/Item/13754.aspx 时报connect reset错误（jsoup 已经设置了忽略证书，信任所有主机） 2.通过chrome浏览器,fiddler访问目标URL正常。 二、问题分析 Connection Reset——其中一端主动断开连接 Connection Reset是在建立TCP连接之后，其中一方的TCP标志位使用了Reset标志主动重置了连接 客户端Or服务器端 而我这里既...
Document doc = Jsoup.connect(url).get();出现java.net.SocketTimeoutException: Read timed out
11-30
当使用`Document doc = Jsoup.connect(url).get();`连接某网站时，如果连接超时，就会出现`java.net.SocketTimeoutException: Read timed out`异常。解决这个问题的方法是设置连接超时时间。可以使用以下代码来设置连接超时时间为5秒： ```java Document doc = Jsoup.connect(url).timeout(5000).get(); ``` 这样就可以避免连接超时的问题了。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值