Java中使用代理访问网络及验证

当我在使用Java.net包的API时,由于公司的网络设置了都是通过代理访问网络,因此每次都是遇到connection timeout的情况

针对这种情况,我查看了资料,和JDK的API,发现使用java.net.Proxy类可以设置通过代理访问外网,但访问外网的过程中必须通过验证才行,通过验证使用的类是Authenticator类

import java.net.Authenticator;
import java.net.PasswordAuthentication;

public class BasicAuthenticator extends Authenticator{
	String username;
	String password;
	
	public BasicAuthenticator(String userName,String password){
		this.username = userName;
		this.password = password;
	}

	@Override
	protected PasswordAuthentication getPasswordAuthentication() {
		return new PasswordAuthentication(username,password.toCharArray());
	}
}
定义BasicAuthenticator继承Authenticator抽象类,需要重写getPasswordAuthentication()方法,

应用程序通过重写子类中的 getPasswordAuthentication() 使用此类。此方法通常使用各种 getXXX() 访问器方法获取关于请求验证的实体的信息。然后,它必须通过与用户交互或者某些其他非交互手段获取用户名和密码。之后凭据将以 PasswordAuthentication 返回值的形式返回。 


PasswordAuthentication 类是供 Authenticator 使用的数据持有者。它只是用户名和密码的存储库。

<span style="white-space:pre">		</span>InetSocketAddress addr = new InetSocketAddress("10.200.100.81",8080);
		Proxy proxy = new Proxy(Proxy.Type.HTTP,addr);
		Authenticator.setDefault(new BasicAuthenticator("name","password"));
		URL url = new URL("http://www.csdn.net/");
		HttpURLConnection urlConn = (HttpURLConnection)url.openConnection(proxy);
		
		urlConn.connect();								//打开到url引用资源的通信连接
		urlConn.setConnectTimeout(5000);
		long size = urlConn.getContentLength();
		InputStream is = urlConn.getInputStream();
		InputStreamReader isr = new InputStreamReader(is);
		BufferedReader br =new BufferedReader(isr);
		while(true){
			String s = br.readLine();
			if(s!=null){
				sop(s);
			}
		}
使用代理的时候,这里使用的是Proxy.Type.HTTP方式,

还要通过Authentictor.setDefault方法将帐号与密码传过来,这样代理及验证都可以通过了。

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
使用Java进行数据抓取时,可能会遇到百度的安全验证。这是因为百度通过实施安全验证措施来保护其服务器和数据。这些验证可以是验证码、人机识别或其他安全措施。 当我们从百度网站或其他网站抓取数据时,系统会检测到频繁的请求,并怀疑这些请求可能是恶意攻击或滥用服务器资源的行为。为了防止这种滥用,系统会要求用户进行安全验证以确认其是真实的用户而不是自动化程序。 要解决这个问题,我们可以使用以下方法: 1. 通过模拟人的行为:可以使用Java模拟真实用户的行为,例如设置请求头信息,包括User-Agent、Referer等,以及合理的延时等待机制,以便让程序看起来更像真实的用户操作。 2. 使用代理服务器:使用代理服务器可以将请求重定向到不同的IP地址,从而规避一些安全验证。我们可以使用一些第三方代理服务,如Tor网络或付费代理服务。 3. 设定请求间隔:为了避免频繁请求而被拦截,我们可以添加适当的延时,使得请求之间有一定的时间间隔。 4. 使用Cookie信息:有些网站使用Cookie信息来验证用户身份,我们可以通过Java代码自动获取和传递这些Cookie信息,以使请求看起来更像真实用户的请求。 然而,我们需要注意的是,网站的安全验证措施是为了保护自身和用户的隐私,滥用抓取数据可能会侵犯网站和用户的权益。在进行数据抓取时,建议遵循网站的相关规定和道德准则,避免对网站进行恶意攻击或滥用。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

互联网极客

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值