PHP获取Cookie模拟登录CURL
来源：PHP100中文网 时间：2013-09-12 07:57:44 阅读数：129077
分享到：17
[导读] 要提取google搜索的部分数据，发现google对于软件抓取它的数据屏蔽的厉害，以前伪造下 USER-AGENT就可以抓数据，但是现在却不行了。利用抓包数据发现，Google判断了cookies，当你没有cookies的时候，直接返回30
要提取google搜索的部分数据，发现google对于软件抓取它的数据屏蔽的厉害，以前伪造下 USER-AGENT 就可以抓数据，但是现在却不行了。利用抓包数据发现，Google 判断了 cookies，当你没有cookies的时候，直接返回 302 跳转，而且是连续几十个302跳转，根本抓不了数据。
因此，在发送搜索命令时，需要先提取 cookies 并保存，然后利用保存下来的这个cookies再次发送搜索命令即可正常抓数据了。这其实和论坛的模拟登录一个道理，先POST登录，获取cookies并保存，然后利用这个cookies访问就可以了。
一、定义Cookie存储路径
必须使用绝对路径
view sourceprint?
1.$cookie_jar = dirname(FILE)."/pic.cookie";
二、获取Cookie
将cookie存入文件
view sourceprint?
1.
u
r
l
=
"
h
t
t
p
:
/
/
1.2.3.4
/
"
;
2.
url = "http://1.2.3.4/"; 2.
url="http://1.2.3.4/";2.ch = curl_init();
3.curl_setopt($ch, CURLOPT_URL,
u
r
l
)
;
4.
c
u
r
l
s
e
t
o
p
t
(
url); 4.curl_setopt(
url);4.curlsetopt(ch, CURLOPT_HEADER, 0);
5.curl_setopt(
c
h
,
C
U
R
L
O
P
T
R
E
T
U
R
N
T
R
A
N
S
F
E
R
,
t
r
u
e
)
;
6.
c
u
r
l
s
e
t
o
p
t
(
ch, CURLOPT_RETURNTRANSFER, true); 6.curl_setopt(
ch,CURLOPTRETURNTRANSFER,true);6.curlsetopt(ch, CURLOPT_COOKIEJAR,
c
o
o
k
i
e
j
a
r
)
;
7.
cookie_jar); 7.
cookiejar);7.content = curl_exec(
c
h
)
;
8.
c
u
r
l
c
l
o
s
e
(
ch); 8.curl_close(
ch);8.curlclose(ch);
三、模拟浏览器获取验证码
该服务器验证码有漏洞，可以自己指定
取出cookie，一起提交给服务器，让服务器以为是浏览器打开登陆页面
view sourceprint?
1.
c
h
=
c
u
r
l
i
n
i
t
(
)
;
2.
c
u
r
l
s
e
t
o
p
t
(
ch = curl_init(); 2.curl_setopt(
ch=curlinit();2.curlsetopt(ch, CURLOPT_URL, ‘http://1.2.3.4/getCheckpic.action?rand=6836.185874812305’);
3.curl_setopt($ch, CURLOPT_COOKIEFILE,
c
o
o
k
i
e
j
a
r
)
;
4.
c
u
r
l
s
e
t
o
p
t
(
cookie_jar); 4.curl_setopt(
cookiejar);4.curlsetopt(ch, CURLOPT_HEADER, 0);
5.curl_setopt(
c
h
,
C
U
R
L
O
P
T
R
E
T
U
R
N
T
R
A
N
S
F
E
R
,
1
)
;
6.
ch, CURLOPT_RETURNTRANSFER, 1); 6.
ch,CURLOPTRETURNTRANSFER,1);6.ret = curl_exec(
c
h
)
;
7.
c
u
r
l
c
l
o
s
e
(
ch); 7.curl_close(
ch);7.curlclose(ch);
四、POST提交
view sourceprint?
01.KaTeX parse error: Expected 'EOF', got '&' at position 15: post = "name=2&̲userType=1&pass…ch = curl_init();
03.curl_setopt(
c
h
,
C
U
R
L
O
P
T
U
R
L
,
"
h
t
t
p
:
/
/
1.2.3.4
/
l
o
g
i
n
s
t
u
d
e
n
t
.
a
c
t
i
o
n
"
)
;
04.
c
u
r
l
s
e
t
o
p
t
(
ch, CURLOPT_URL, "http://1.2.3.4/loginstudent.action"); 04.curl_setopt(
ch,CURLOPTURL,"http://1.2.3.4/loginstudent.action");04.curlsetopt(ch, CURLOPT_HEADER, false);
05.curl_setopt(
c
h
,
C
U
R
L
O
P
T
R
E
T
U
R
N
T
R
A
N
S
F
E
R
,
1
)
;
06.
c
u
r
l
s
e
t
o
p
t
(
ch, CURLOPT_RETURNTRANSFER,1); 06.curl_setopt(
ch,CURLOPTRETURNTRANSFER,1);06.curlsetopt(ch, CURLOPT_POSTFIELDS,
p
o
s
t
)
;
07.
c
u
r
l
s
e
t
o
p
t
(
post); 07.curl_setopt(
post);07.curlsetopt(ch, CURLOPT_COOKIEFILE,
c
o
o
k
i
e
j
a
r
)
;
08.
cookie_jar); 08.
cookiejar);08.result=curl_exec(
c
h
)
;
09.
c
u
r
l
c
l
o
s
e
(
ch); 09.curl_close(
ch);09.curlclose(ch);
五、到指定页面获取数据
view sourceprint?
01.
c
h
=
c
u
r
l
i
n
i
t
(
)
;
02.
c
u
r
l
s
e
t
o
p
t
(
ch = curl_init(); 02.curl_setopt(
ch=curlinit();02.curlsetopt(ch, CURLOPT_URL, “http://1.2.3.4/accountcardUser.action”);
03.curl_setopt(
c
h
,
C
U
R
L
O
P
T
H
E
A
D
E
R
,
f
a
l
s
e
)
;
04.
c
u
r
l
s
e
t
o
p
t
(
ch, CURLOPT_HEADER, false); 04.curl_setopt(
ch,CURLOPTHEADER,false);04.curlsetopt(ch, CURLOPT_HEADER, 0);
05.curl_setopt(
c
h
,
C
U
R
L
O
P
T
R
E
T
U
R
N
T
R
A
N
S
F
E
R
,
0
)
;
06.
c
u
r
l
s
e
t
o
p
t
(
ch, CURLOPT_RETURNTRANSFER,0); 06.curl_setopt(
ch,CURLOPTRETURNTRANSFER,0);06.curlsetopt(ch, CURLOPT_COOKIEFILE,
c
o
o
k
i
e
j
a
r
)
;
07.
cookie_jar); 07.
cookiejar);07.html=curl_exec(
c
h
)
;
08.
/
/
v
a
r
d
u
m
p
(
ch); 08.// var_dump(
ch);08.//vardump(html);
09.curl_close($ch);PHP获取Cookie模拟登录CURL
来源：PHP100中文网 时间：2013-09-12 07:57:44 阅读数：129077
分享到：17
[导读] 要提取google搜索的部分数据，发现google对于软件抓取它的数据屏蔽的厉害，以前伪造下 USER-AGENT就可以抓数据，但是现在却不行了。利用抓包数据发现，Google判断了cookies，当你没有cookies的时候，直接返回30
要提取google搜索的部分数据，发现google对于软件抓取它的数据屏蔽的厉害，以前伪造下 USER-AGENT 就可以抓数据，但是现在却不行了。利用抓包数据发现，Google 判断了 cookies，当你没有cookies的时候，直接返回 302 跳转，而且是连续几十个302跳转，根本抓不了数据。
因此，在发送搜索命令时，需要先提取 cookies 并保存，然后利用保存下来的这个cookies再次发送搜索命令即可正常抓数据了。这其实和论坛的模拟登录一个道理，先POST登录，获取cookies并保存，然后利用这个cookies访问就可以了。
一、定义Cookie存储路径
必须使用绝对路径
view sourceprint?
1.$cookie_jar = dirname(FILE)."/pic.cookie";
二、获取Cookie
将cookie存入文件
view sourceprint?
1.
u
r
l
=
"
h
t
t
p
:
/
/
1.2.3.4
/
"
;
2.
url = "http://1.2.3.4/"; 2.
url="http://1.2.3.4/";2.ch = curl_init();
3.curl_setopt($ch, CURLOPT_URL,
u
r
l
)
;
4.
c
u
r
l
s
e
t
o
p
t
(
url); 4.curl_setopt(
url);4.curlsetopt(ch, CURLOPT_HEADER, 0);
5.curl_setopt(
c
h
,
C
U
R
L
O
P
T
R
E
T
U
R
N
T
R
A
N
S
F
E
R
,
t
r
u
e
)
;
6.
c
u
r
l
s
e
t
o
p
t
(
ch, CURLOPT_RETURNTRANSFER, true); 6.curl_setopt(
ch,CURLOPTRETURNTRANSFER,true);6.curlsetopt(ch, CURLOPT_COOKIEJAR,
c
o
o
k
i
e
j
a
r
)
;
7.
cookie_jar); 7.
cookiejar);7.content = curl_exec(
c
h
)
;
8.
c
u
r
l
c
l
o
s
e
(
ch); 8.curl_close(
ch);8.curlclose(ch);
三、模拟浏览器获取验证码
该服务器验证码有漏洞，可以自己指定
取出cookie，一起提交给服务器，让服务器以为是浏览器打开登陆页面
view sourceprint?
1.
c
h
=
c
u
r
l
i
n
i
t
(
)
;
2.
c
u
r
l
s
e
t
o
p
t
(
ch = curl_init(); 2.curl_setopt(
ch=curlinit();2.curlsetopt(ch, CURLOPT_URL, ‘http://1.2.3.4/getCheckpic.action?rand=6836.185874812305’);
3.curl_setopt($ch, CURLOPT_COOKIEFILE,
c
o
o
k
i
e
j
a
r
)
;
4.
c
u
r
l
s
e
t
o
p
t
(
cookie_jar); 4.curl_setopt(
cookiejar);4.curlsetopt(ch, CURLOPT_HEADER, 0);
5.curl_setopt(
c
h
,
C
U
R
L
O
P
T
R
E
T
U
R
N
T
R
A
N
S
F
E
R
,
1
)
;
6.
ch, CURLOPT_RETURNTRANSFER, 1); 6.
ch,CURLOPTRETURNTRANSFER,1);6.ret = curl_exec(
c
h
)
;
7.
c
u
r
l
c
l
o
s
e
(
ch); 7.curl_close(
ch);7.curlclose(ch);
四、POST提交
view sourceprint?
01.KaTeX parse error: Expected 'EOF', got '&' at position 15: post = "name=2&̲userType=1&pass…ch = curl_init();
03.curl_setopt(
c
h
,
C
U
R
L
O
P
T
U
R
L
,
"
h
t
t
p
:
/
/
1.2.3.4
/
l
o
g
i
n
s
t
u
d
e
n
t
.
a
c
t
i
o
n
"
)
;
04.
c
u
r
l
s
e
t
o
p
t
(
ch, CURLOPT_URL, "http://1.2.3.4/loginstudent.action"); 04.curl_setopt(
ch,CURLOPTURL,"http://1.2.3.4/loginstudent.action");04.curlsetopt(ch, CURLOPT_HEADER, false);
05.curl_setopt(
c
h
,
C
U
R
L
O
P
T
R
E
T
U
R
N
T
R
A
N
S
F
E
R
,
1
)
;
06.
c
u
r
l
s
e
t
o
p
t
(
ch, CURLOPT_RETURNTRANSFER,1); 06.curl_setopt(
ch,CURLOPTRETURNTRANSFER,1);06.curlsetopt(ch, CURLOPT_POSTFIELDS,
p
o
s
t
)
;
07.
c
u
r
l
s
e
t
o
p
t
(
post); 07.curl_setopt(
post);07.curlsetopt(ch, CURLOPT_COOKIEFILE,
c
o
o
k
i
e
j
a
r
)
;
08.
cookie_jar); 08.
cookiejar);08.result=curl_exec(
c
h
)
;
09.
c
u
r
l
c
l
o
s
e
(
ch); 09.curl_close(
ch);09.curlclose(ch);
五、到指定页面获取数据
view sourceprint?
01.
c
h
=
c
u
r
l
i
n
i
t
(
)
;
02.
c
u
r
l
s
e
t
o
p
t
(
ch = curl_init(); 02.curl_setopt(
ch=curlinit();02.curlsetopt(ch, CURLOPT_URL, "
03.curl_setopt(
c
h
,
C
U
R
L
O
P
T
H
E
A
D
E
R
,
f
a
l
s
e
)
;
04.
c
u
r
l
s
e
t
o
p
t
(
ch, CURLOPT_HEADER, false); 04.curl_setopt(
ch,CURLOPTHEADER,false);04.curlsetopt(ch, CURLOPT_HEADER, 0);
05.curl_setopt(
c
h
,
C
U
R
L
O
P
T
R
E
T
U
R
N
T
R
A
N
S
F
E
R
,
0
)
;
06.
c
u
r
l
s
e
t
o
p
t
(
ch, CURLOPT_RETURNTRANSFER,0); 06.curl_setopt(
ch,CURLOPTRETURNTRANSFER,0);06.curlsetopt(ch, CURLOPT_COOKIEFILE,
c
o
o
k
i
e
j
a
r
)
;
07.
cookie_jar); 07.
cookiejar);07.html=curl_exec(
c
h
)
;
08.
/
/
v
a
r
d
u
m
p
(
ch); 08.// var_dump(
ch);08.//vardump(html);
09.curl_close($ch);
2455
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
