前言
作为程序员,工作中会面临着各种各样的需求,好言讲解的或差言硬塞的,我们也只得都去接受。最近接到一个需求,模拟安装包在某渠道网站的发布流程,简化运营人员运营时间成本,说白了我们做的事儿就是让他们更方便,不需要过多的操作即可完成向某个渠道发布更新的安装包!
环境准备
由于本次开发使用的是Java语言,好多人推荐用Python写,我也想,但是我不会呀。。。。。。Java是工作中的母语,你们懂得!
需要的Jar包:
- httpclient包,本人选择的是4.3.1版本
- jsoup包,本人选择的是1.8.2版本
有人会问,为何需要jsoup,我相信很多人都爬过网页,jsoup是个不错的网页爬取工具!
需要的抓包工具
- charles,本人使用的是3.10.1
示例
此处以应用汇的登录为例
操作步骤:
- 使用charles抓取操作地址,请求登录地址为:http://dev.appchina.com/market/auth/login_post.action?mode=dev
- 代码如下:
/**
* 登录(调用端)
* @return
*/
public static String login() throws Exception {
HttpClient http = new DefaultHttpClient();
Map<String, String> map = new HashMap<>();
map.put("login", userAccount);//登录账号
map.put("password", password);//登录密码
//loginUrl为抓取的地址
String mainUrl = HttpUtils.postRedirect(http, loginUrl, map);
if ("".equals(mainUrl)) {
throw new Exception("login error, loginUrl:" + loginUrl + ", ret" + mainUrl);
}
return mainUrl;
}
HttpUtils代码片段
public static String postRedirect(HttpClient http, String url, Map<String, String> map) {
HttpPost post = new HttpPost(url);
HttpResponse response = null;
//302请求返回Redirect地址
String location = "";
try {
//组织参数
Iterator<String> it = map.keySet().iterator();
List<NameValuePair> nvps = new ArrayList<NameValuePair>();
while (it.hasNext()) {
String key = it.next();
String value = map.get(key);
nvps.add(new BasicNameValuePair(key, value));
}
post.setEntity(new UrlEncodedFormEntity(nvps));
//声明此Url为302请求的Url,即会返回Redirect Location
HttpParams params = new BasicHttpParams();
params.setParameter("http.protocol.handle-redirects", false);
post.setParams(params);
//读取返回结果,HttpClient会记录Cookie状态
response = http.execute(post);
//临时存储字符串。
StringBuffer buffer = new StringBuffer();
if (response.getStatusLine().getStatusCode() - 302 == 0) {
HttpEntity entity = response.getEntity();
InputStream in = null;
try {
location = response.getFirstHeader("Location").getValue();
in = entity.getContent();
BufferedReader reader = new BufferedReader(new InputStreamReader(in));
String line = null;
while ((line = reader.readLine()) != null) {
buffer.append(line);
System.out.println(line);
}
} finally {
//关闭输入流
if (in != null)
in.close();
}
return location;
}
} catch (Exception e) {
e.printStackTrace();
} finally {
//释放连接。
try {
post.abort();
} catch (Exception e) {
}
try {
post.releaseConnection();
} catch (Exception e) {
}
if (response != null) {
try {
EntityUtils.consumeQuietly(response.getEntity());
} catch (Exception e) {
}
}
}
return location;
}
这样登录操作就完成了,当然这个是没有验证码的情况,如果有验证码,需要解析验证码链接,自己通过请求获取验证码图片,接下来是人工输入也好或者是自动解析验证码(比较复杂)也好,全由咱自己决定!
总结:模拟请求并不复杂,可能过程总会遇到各种各样的问题,但是基本上能够根据错误Code追查到原因。路漫漫,嫑慌,走着!