最近做了一点小东西,需求是这样的:需要对一个网站进行访问、数据分析已及提交网页表单。
根据需求,我创建了一个类,用来专门处理网站底层的访问以及表单的提交,结构如下:
class MyHttpRequest{
private int statusCode;
private int sessionString;
private Cookie cookie;
public String get(String url, String reference){}
public String post(String url, String reference, String postDate){}
}
这个类没有什么好介绍的,其实就是HttpRequest的一个封装,在这个里面针对网站的需求,进行了Cookie,Session,reference等的处理。而针对每次post或者get,都会将网站返回的StatusCode赋值给私有变量statusCode,从而可以让其他调用他的程序根据这个code进行相应的处理。
接下来,我创建了一个抽象类,用来作为各种针对网站操作的父类,代码如下:
class AbstractAction{
protected MyHttpRequest request;
}
同时这个父类中完成了对于Cookie的构建,在这里说明一下,Cookie的构建,有人也会选择放入前面的MyHttpRequest里面,但是这种做法在后面会遇到一个问题,就是如果一个Action需要一系列操作,比如,先获取某一网页的信息,然后再根据这一信息作相应的表单提交,如果构建不同的Cookie不仅仅是对资源的一种浪费,也可能让网站更容易区分出程序和手动。因此为了保证一系列动作在一个Cookie下完成,我将Cookie的构建放在乐AbstractAction里面。
另外,从AbstractAction我们得到的好处就是,不需要在以后创建的每个Action里面都去初始化MyHttpRequest以及Cookie等相关信息,这样使得代码更加简单。
接下来,创建AbstractAction的子类,来实现对网站操作的各个功能。
本文旨在说明一种设计思路,具体的实现和细节并未给出。希望读者能够有所收益。
根据需求,我创建了一个类,用来专门处理网站底层的访问以及表单的提交,结构如下:
class MyHttpRequest{
private int statusCode;
private int sessionString;
private Cookie cookie;
public String get(String url, String reference){}
public String post(String url, String reference, String postDate){}
}
这个类没有什么好介绍的,其实就是HttpRequest的一个封装,在这个里面针对网站的需求,进行了Cookie,Session,reference等的处理。而针对每次post或者get,都会将网站返回的StatusCode赋值给私有变量statusCode,从而可以让其他调用他的程序根据这个code进行相应的处理。
接下来,我创建了一个抽象类,用来作为各种针对网站操作的父类,代码如下:
class AbstractAction{
protected MyHttpRequest request;
}
同时这个父类中完成了对于Cookie的构建,在这里说明一下,Cookie的构建,有人也会选择放入前面的MyHttpRequest里面,但是这种做法在后面会遇到一个问题,就是如果一个Action需要一系列操作,比如,先获取某一网页的信息,然后再根据这一信息作相应的表单提交,如果构建不同的Cookie不仅仅是对资源的一种浪费,也可能让网站更容易区分出程序和手动。因此为了保证一系列动作在一个Cookie下完成,我将Cookie的构建放在乐AbstractAction里面。
另外,从AbstractAction我们得到的好处就是,不需要在以后创建的每个Action里面都去初始化MyHttpRequest以及Cookie等相关信息,这样使得代码更加简单。
接下来,创建AbstractAction的子类,来实现对网站操作的各个功能。
本文旨在说明一种设计思路,具体的实现和细节并未给出。希望读者能够有所收益。