Server returned HTTP response code: 403 for URL: http://blog.csdn.net

最新推荐文章于 2021-10-21 22:37:59 发布
最新推荐文章于 2021-10-21 22:37:59 发布
阅读量9.2k 收藏
点赞数
分类专栏： java J2EE android
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/getchance/article/details/40685485
版权
android 同时被 3 个专栏收录
66 篇文章 0 订阅
订阅专栏
java
13 篇文章 0 订阅
订阅专栏
J2EE
7 篇文章 0 订阅
订阅专栏


在使用Jsoup抓取CSDN博客数据时候报http403错误，这是由于CSDN博客服务器设置了访问权限

如果是服务器端禁止抓取,那么这个你可以通过设置User-Agent来欺骗服务器

connection.setRequestProperty("User-Agent", "Mozilla/4.0 (compatible; MSIE 5.0; Windows NT; DigExt)");

利用这个原理，Jsoup代码稍作调整即可:

Connection connection = Jsoup.connect(url);
connection.userAgent("Mozilla/4.0 (compatible; MSIE 5.0; Windows NT; DigExt)");
Document doc = connection.get();




王莹月
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
专栏目录
java.io.IOException: Server returned HTTP response code: 403 for URL: http://start.spring.io
weixin_33998125的博客
12-29 2961
403 Forbidden 是HTTP协议中的一个状态码(Status Code)。可以简单的理解为没有权限访问此站。 主要原因分析 1.你的IP被列入黑名单2.你在一定时间内过多地访问此网站（一般是用采集程序），被防火墙拒绝访问了3.网站域名解析到了空间，但空间未绑定此域名4.你的网页脚本文件在当前目录下没有执行权限5.在不允许写/创建文件的目录中执...
java.io.IOException: Server returned HTTP response code: 400 for URL: http://xxxx
Villaino_o的博客
04-29 7741
java.io.IOException: Server returned HTTP response code: 400 for URL: http://xxxx
java.io.IOException: Server returned HTTP response code: 403 for URL
我有满天星辰的博客
05-09 9739
403 Forbidden 是HTTP协议中的一个状态码(Status Code)。可以简单的理解为没有权限访问此站。 引发的BUG： java.io.IOException: Server returned HTTP response code: 403 for URL: http://img4.imgtn.bdimg.com/it/u=2718497102,228936332&fm=26&gp=0.jpg 主要原因分析 1.你的IP被列入黑名单 2.你在一定时间内过多地访问此网站（.
Server returned HTTP response code: 403 for URL报错
qq_36631553的博客
03-17 2万+
在Java调用图床API的调试中遇到Server returned HTTP response code: 403 for URL报错 百度得知服务器的安全设置不接受Java程序作为客户端访问 解决办法： 在http连接时加入一行代码 httpUrlConn.setRequestProperty("User-Agent", "Mozilla/4.0 (compatible; MSIE 5....
URL编码问题java.io.IOException: Server returned HTTP response code: 400 for URL: http://
寂夜了无痕的博客
08-29 6万+
代码中有段请求本地接口的操作结果发现居然调不通 写了main方法测试 也不行。。。 报错信息： 将这个接口放在浏览器或者postman中却可以调通 度娘一波 原来是URL编码问题 1.url该编码的编码一定要编码,否则如果存在空格就会报400错误,那么什么样的url是该编码的呢? .url中有空格等特殊字符的 . URL中有中文的 2.编码要只对参数...
记录解决java.io.IOException: Server returned HTTP response code: 500 for URL：xxxxxxxx
真是适合睡觉的天气
07-08 4万+
踩坑经历 因为项目需要去对接别的接口，使用URLConnection POST请求https接口，发送json数组时遇到java.io.IOException: Server returned HTTP response code: 500 for URL。 当时情况是本地测试通过，正常返回，放到linux云服务器上测试通过，正常返回，放到windows server服务器上就有问题了，就是上...
java.io.IOException: Server returned HTTP response code: 405 for URL:
test
02-21 1万+
java 调用第三方接口的时候，报405： java.io.IOException: Server returned HTTP response code: 405 for URL: 参考https://blog.csdn.net/qq_36213608/article/details/72829056的解决方案 405 表示不允许此方法：对于请求所标识的资源，不允许使用请求行中所指定的...
java.io.IOException: Server returned HTTP response code: 503 for UR
日出云海 时不我与
06-03 6313
记录java.io.IOException: Server returned HTTP response code: 503 for UR摘要尝试发现问题解决问题心得 摘要 用户要去调用一个第三方系统的功能，通过http协议调用，在本地测试环境跑正常，提交版本到测试环境，刚开始运行正常，后面过了一端时间，偶尔出现503，以为是对方的服务问题，通过postman测试正常，下面就是排查问题了。 尝试 在网络浏览了各路大神的问题和解决办法： 请求头设置各种参数，—无效 各种输入输出流切换，—无效 getInpu
[报错总结]java.io.IOException: Server returned HTTP response code: 500 for URL:
偷往事的人
10-21 590
参考： https://blog.csdn.net/qq_38361800/article/details/95068084 统一编码格式、一开始用的 PrintWriter out = new PrintWriter(conn.getOutputStream()); // 用PrintWriter进行包装 out.println(param); 后来改成图片上的OutputStreamWriter 方式 这样在conn.getInputStream()时就不会报错了 ...
解决Java URL.openConnection().connect();报错：Server returned HTTP re
最新发布
05-04
声明 1、本解决方法适用于浏览器正常访问，但是代码请求报错Http 403错误的场景； 概述： 1、Http 403报错是常见的网络错误提示，表示...报错Server returned HTTP response code 403 for URL.txt》里面的内容操作。
BasicAuth2.java
03-16
java.io.IOException: Server returned HTTP response code: 403 for URL 处理过程记录 BASIC AUTH2 POST接口,解决403问题
error: RPC failed; HTTP 413 curl 22 The requested URL returned error: 413 Request Entity Too Large
01-08
git首次提交代码到远程仓库提示413错误，错误信息如下 git push --set-upstream origin master Enumerating objects: 153, done. ... HTTP 413 curl 22 The requested URL returned error: 413 Req
解决 [ONNXRuntimeError] : 1 : FAIL Non-zero status code returned
05-16
在将PyTorch模型转换为ONNX格式后，运行ONNX模型时遇到的错误"ONNXRuntimeError: 1: FAIL: Non-zero status code returned while running FusedConv node"通常是由于模型转换过程中丢失了一些关键信息或者ONNX不支持...
android studio生成aar包并在其他工程引用aar包
热门推荐
王月莹的专栏
08-03 13万+
1.aar包是android studio下打包android工程中src、res、lib后生成的aar文件，aar包导入其他android studio 工程后，其他工程可以方便引用源码和资源文件 2.生成aar包步骤： ①.用android studio打开一个工程，然后新建一个Module，新建Module时候选择Android Library,后面按新建普通工程操作
android onTouchEvent 左右手势滑动事件处理
王月莹的专栏
01-07 6万+
要实现手指在屏幕上左右滑动的事件需要实例化对象GestureDetector，new GestureDetector(MainActivity.this,onGestureListener);首先实现监听对象GestureDetector.OnGestureListener，根据x或y轴前后变化坐标来判断是左滑动还是右滑动并根据不同手势滑动做出事件处理doResult（int action），
Intent传递Parcelable List对象
王月莹的专栏
11-25 1万+
步骤： 1.首先对象要实现Parcelable接口 2.用Intent发送对象或者list，关键代码 bundle.putParcelable("student", stu); bundle.putParcelableArrayList("student_list", list); 3.用Intent获取对象或者list ，关键代码  Student stu
什么是内边距(padding)和外边距(margin)
王月莹的专栏
12-26 1万+
如下图所示，不解释！
类似微信等待dialog转圈等待
王月莹的专栏
06-24 1万+
运行效果如图： LoadingDialog.java import android.app.Dialog; import android.content.Context; import android.os.Bundle; import android.widget.LinearLayout; import android.widget.TextView; pub
java.io.IOException: Server returned HTTP response code: 403 for URL:
09-08
java.io.IOException: Server returned HTTP response code: 403 for URL 是一个Java异常，表示在访问某个URL时，服务器返回了403错误状态码。 通常，HTTP状态码403表示禁止访问，即服务器理解了请求，但拒绝了执行。这可能是因为服务器具有访问控制，需要进行身份验证，或者是由于某些其他原因导致请求被拒绝。 在处理这个异常时，可以尝试使用基本身份验证（BASIC AUTH）或者检查URL是否有访问限制。如果需要身份验证，可以在请求头中添加身份验证信息。另外，还可以设置一些其他请求属性，如不缓存、保持连接等。 可以使用以下代码段来处理403错误： ``` URL realUrl = new URL(url); URLConnection urlConn = realUrl.openConnection(); HttpURLConnection conn = (HttpURLConnection) urlConn; conn.setRequestMethod("PUT"); conn.setUseCaches(false); conn.setRequestProperty("Accept", "*/*"); conn.setRequestProperty("connection", "Keep-Alive"); // 添加身份验证信息 // ... ``` 通过上述处理，可以解决403错误并继续进行请求操作。
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值