Java代理IP

最近在搞爬虫,因为爬取量大,经常导致封IP的现象,(网上投票也经常遇到限制Ip的破事),就自己准备写个,找了很多的文献(也就是很多google),所说的要不就是几行代码,要不就是错误的,楼楼表示被坑的很惨,经常性的访问本机IP,浪费大量的时间,今天做完了,就拿出来和大家分享下,话不多说,我们下面上代码

1 最简单就是Jsop连接(楼楼第一次测试就通过了)

全局设置端口好和ip地址(具体不多做解释,这里我们解释下 System.getProperties().setProperty() == System.setProperty()) --http://city.ip138.com/ip2city.asp 测试IP

System.setProperty 相当于一个静态变量 ,存在内存里面!
可以在项目的任何一个地方 通过System.getProperty("变量");来获得,

2 原生Java

 

 

 

 

 

上面的代码就不细说了,有一点跟大家提一下,HttpURLConnection httpURLConnection = (HttpURLConnection)connection; 用httpURLConnection来查看返回的StatusCode

connection.getInputStream(); 相当于connect

3 Socket于Proxy对象代理

此方法和原生Java类似,只不过是封装了下端口和地址

4 HttpClient

HttpClient连接的时候大家一定要记得释放连接,后果你们懂得

总:4种方式,都亲测可过,针对一些连接的问题,给大家一些检查的建议

1 查看端口,ip地址是否正确(楼楼刚开始的时候端口写错,测了半天全是本地ip,真是想死的心都有)

2 java连接的时候,若一直显示本地IP,请记住,一定是你代码哪里写错了,血的教训,然后各种找资源,查代码,

connection.connect();少了这句,可是
connection.getInputStream()里不是实现了吗,楼楼表示不解,查了半天,然并卵,大家可以加上这句试试

再次感谢各位看官~

 

转载于:https://www.cnblogs.com/haoming1100/articles/haoming1100.html

Java Selenium中使用私密代理IP主要是为了隐藏真实IP地址并提高网络请求的匿名性。Selenium本身并不直接支持代理设置,但是你可以通过一些第三方库,如`Selenium Grid`、`ProxyMiddleware`等配合浏览器的原生支持来实现。 以下是基本步骤: 1. **添加依赖**:首先,你需要安装一个支持HTTP代理的库,例如`selenium-webdriver-manager`,可以使用Maven或Gradle管理依赖。 ```java // Maven <dependency> <groupId>io.github.bonigarcia</groupId> <artifactId>selenium-wdm</artifactId> <version>4.6.0</version> </dependency> // Gradle implementation 'io.github.bonigarcia:selenium-wdm:4.6.0' ``` 2. **配置代理**:创建一个`DesiredCapabilities`实例,并设置代理信息。比如使用`webdriver_manager.proxy`模块。 ```java from selenium.webdriver.common.desired_capabilities import DesiredCapabilities capabilities = DesiredCapabilities.chrome(); proxy = webdriver_manager.proxy(); proxy.http_proxy = "http://your-proxy-ip:port"; proxy.ftp_proxy = proxy.http_proxy; // 如果需要代理FTP proxy.ssl_proxy = proxy.http_proxy; // 如果需要代理HTTPS proxy.no_proxy = "localhost"; // 排除某些域名不使用代理 capabilities.setCapability("proxy", proxy.to_capabilities()); ``` 3. **启动WebDriver**:创建一个新的浏览器实例时,传递配置好的`DesiredCapabilities`。 ```java from selenium import webdriver driver = webdriver.Chrome(desired_capabilities=capabilities) ```
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值