SAE上使用curl函数附带cookie的一些细节

最新推荐文章于 2022-08-15 19:42:08 发布
最新推荐文章于 2022-08-15 19:42:08 发布
阅读量1.3k 收藏
点赞数
分类专栏： 微信

SAE禁止了本地的IO操作，所以在使用上需要单独修改下代码！做过小偷程序或者模拟登录时，我想很多童鞋都用过curl函数。SAE已经完全兼容curl函数（内部用FetchURL实现）。在使用curl发送http请求时，附带cookie却有些头疼了。下面讲讲个人的思路，如果有更好的方案，欢迎补充~

首先我在自己的网站做了个php脚本，需要接受两个通过post发送的字段，username为admin，password为123456，当用户名和密码正确显示"已登录"，并给COOKIE随便赋一些值，如果没有接收到数据或数据错误显示“未登录”，如果已登录，存在session的时候则显示“admin”，并打印COOKIE数组。
我现在的需求是，在a.php中使用curl发送相应的字段模拟登录，保存cookie文件，并输出请求到的内容，在b.php中使用a.php保存的cookie文件请求（不发送任何数据）并输出请求到的内容。

在本地的理论效果是，a.php中输出的内容是“已登录”，而b.php则应输出“admin”和cookie数组的内容:

a.php

PHP
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
<?
$cookie_file = realpath ( 'login.tmp' ) ; //保存cookie信息的文件绝对路径
$post_fields = "username=admin&password=123456" ; //要发送的字段内容
$ch = curl_init ( "http://xxx.com/login.php" ) ;
curl_setopt ( $ch , CURLOPT_HEADER , 0 ) ;
curl_setopt ( $ch , CURLOPT_RETURNTRANSFER , 1 ) ;
curl_setopt ( $ch , CURLOPT_USERAGENT , "Mozilla/5.0 (compatible; MSIE 9.0; Windows NT 6.1; Trident/5.0)" ) ;
curl_setopt ( $ch , CURLOPT_NOPROGRESS , 0 ) ;
curl_setopt ( $ch , CURLOPT_FOLLOWLOCATION , 1 ) ;
curl_setopt ( $ch , CURLOPT_COOKIEJAR , $cookie_file ) ; //将cookie保存在文件中
curl_setopt ( $ch , CURLOPT_POST , 1 ) ;
curl_setopt ( $ch , CURLOPT_POSTFIELDS , $post_fields ) ;
echo $data = curl_exec ( $ch ) ;
curl_close ( $ch ) ;
?>

b.php

PHP
1
2
3
4
5
6
7
8
9
10
11
12
<?
$cookie_file = realpath ( 'login.tmp' ) ; //保存cookie信息的文件绝对路径
$ch = curl_init ( "http://xxx.com/login.php" ) ;
curl_setopt ( $ch , CURLOPT_HEADER , 0 ) ;
curl_setopt ( $ch , CURLOPT_RETURNTRANSFER , 1 ) ;
curl_setopt ( $ch , CURLOPT_USERAGENT , "Mozilla/5.0 (compatible; MSIE 9.0; Windows NT 6.1; Trident/5.0)" ) ;
curl_setopt ( $ch , CURLOPT_NOPROGRESS , 0 ) ;
curl_setopt ( $ch , CURLOPT_FOLLOWLOCATION , 1 ) ;
curl_setopt ( $ch , CURLOPT_COOKIEFILE , $cookie_file ) ; //使用a.php中保存的cookie信息
echo $data = curl_exec ( $ch ) ;
curl_close ( $ch ) ;
?>

但是这段代码在SAE上就无法实现效果，因为SAE不允许IO操作。下面给出两种方案解决这种问题！

第一种，使用kvdb服务，讲cookie信息从http头中提取出来，通过字符串的形式发送。

a.php

PHP
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
<?
$ch = curl_init ( "http://xxx.com/login.php" ) ;
$post_fields = "username=admin&password=123456" ; //要发送的字段内容
curl_setopt ( $ch , CURLOPT_HEADER , 1 ) ; //需要接收http头的内容
curl_setopt ( $ch , CURLOPT_RETURNTRANSFER , 1 ) ;
curl_setopt ( $ch , CURLOPT_USERAGENT , "Mozilla/5.0 (compatible; MSIE 9.0; Windows NT 6.1; Trident/5.0)" ) ;
curl_setopt ( $ch , CURLOPT_NOPROGRESS , 0 ) ;
curl_setopt ( $ch , CURLOPT_FOLLOWLOCATION , 1 ) ;
curl_setopt ( $ch , CURLOPT_POST , 1 ) ;
curl_setopt ( $ch , CURLOPT_POSTFIELDS , $post_fields ) ;
$data = curl_exec ( $ch ) ;
curl_close ( $ch ) ;
$TempArr = explode ( "\r\n\r\n" , $data ) ;
$TeData = '' ; //存放cookie信息
while ( preg_match ( "/(.*?)Set\-Cookie: (.*?); (.*)/is" , $TempArr [ 0 ] , $matches ) ) {
$TeData . = $matches [ 2 ] . ";" ; //将http头中的cookie信息匹配出来并存入字符串中
$TempArr [ 0 ] = $matches [ 3 ] ;
}
file_put_contents ( 'saekv://login.tmp' , $TeData ) ; //将cookie信息保存到kvdb中
?>

使用KVDB服务需要先开启，此部分建议看下官方文档，这里为了简便使用了Wrappers，建议使用原生的接口对kvdb进行操作！

b.php

PHP
1
2
3
4
5
6
7
8
9
10
11
12
<?
$cookie = file_get_contents ( 'saekv://login.tmp' ) ; //将cookie信息从kvdb取出来
$ch = curl_init ( "http://xxx.com/login.php" ) ;
curl_setopt ( $ch , CURLOPT_HEADER , 0 ) ;
curl_setopt ( $ch , CURLOPT_RETURNTRANSFER , 1 ) ;
curl_setopt ( $ch , CURLOPT_USERAGENT , "Mozilla/5.0 (compatible; MSIE 9.0; Windows NT 6.1; Trident/5.0)" ) ;
curl_setopt ( $ch , CURLOPT_NOPROGRESS , 0 ) ;
curl_setopt ( $ch , CURLOPT_FOLLOWLOCATION , 1 ) ;
curl_setopt ( $ch , CURLOPT_COOKIE , $cookie ) ; //讲cookie信息以字符串的方式发送
echo $data = curl_exec ( $ch ) ;
curl_close ( $ch ) ;
?>

第二种方法是，使用TmpFS服务，将cookie写入临时文件中，由于临时文件的生存周期等同于php请求，所以我们需要把临时文件的内容保存到KVDB中，然后在其他脚本使用时，再将cookie信息写入临时文件中供curl调用！

a.php

PHP
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
<?
$cookie_file = SAE_TMP_PATH . 'login.txt' ; //保存cookie信息的临时文件路径
$post_fields = "username=admin&password=123456" ; //要发送的字段内容
$ch = curl_init ( "http://xxx.com/login.php" ) ;
curl_setopt ( $ch , CURLOPT_HEADER , 0 ) ;
curl_setopt ( $ch , CURLOPT_RETURNTRANSFER , 1 ) ;
curl_setopt ( $ch , CURLOPT_USERAGENT , "Mozilla/5.0 (compatible; MSIE 9.0; Windows NT 6.1; Trident/5.0)" ) ;
curl_setopt ( $ch , CURLOPT_NOPROGRESS , 0 ) ;
curl_setopt ( $ch , CURLOPT_FOLLOWLOCATION , 1 ) ;
curl_setopt ( $ch , CURLOPT_COOKIEJAR , $cookie_file ) ; //将cookie保存在文件中
curl_setopt ( $ch , CURLOPT_POST , 1 ) ;
curl_setopt ( $ch , CURLOPT_POSTFIELDS , $post_fields ) ;
echo $data = curl_exec ( $ch ) ;
curl_close ( $ch ) ;
$cookie = file_get_contents ( $cookie_file ) ;
file_put_contents ( 'saekv://login.tmp' , $cookie ) ; //将cookie信息保存到kvdb中
?>

b.php

PHP
1
2
3
4
5
6
7
8
9
10
11
12
13
14
<?
$cookie = file_get_contents ( 'saekv://login.tmp' ) ;
$cookie_file = SAE_TMP_PATH . 'login.txt' ; //保存cookie信息的临时文件路径
file_put_contents ( $cookie_file , $cookie ) ; //将kvdb中的cookie信息保存到临时文件中
$ch = curl_init ( "http://xxx.com/login.php" ) ;
curl_setopt ( $ch , CURLOPT_HEADER , 0 ) ;
curl_setopt ( $ch , CURLOPT_RETURNTRANSFER , 1 ) ;
curl_setopt ( $ch , CURLOPT_USERAGENT , "Mozilla/5.0 (compatible; MSIE 9.0; Windows NT 6.1; Trident/5.0)" ) ;
curl_setopt ( $ch , CURLOPT_NOPROGRESS , 0 ) ;
curl_setopt ( $ch , CURLOPT_FOLLOWLOCATION , 1 ) ;
curl_setopt ( $ch , CURLOPT_COOKIEFILE , $cookie_file ) ; //使用a.php中保存的cookie信息
echo $data = curl_exec ( $ch ) ;
curl_close ( $ch ) ;
?>

总结下：
第一种方法效率相对高些，但是通过正则匹配获得的cookie信息，有一定的准确性问题。
第二种方法效率要低不少，因为进行很多次的IO操作，但是保存了比较好的原生特性。

(以上对KVDB的操作都是用Wrappers的方式，大家可以考虑使用使用原生接口。)

luckyboy101
关注
专栏目录
windows使用curl命令出现乱码的解决方案
weixin_43178406的博客
06-22 8万+
本文主要介绍了windows使用curl命令出现乱码的解决方案，希望能对使用windows的同学们有所帮助。 文章目录 1. 问题描述 2. 解决方案
【总结】SAE下thinkphp的cookie
kchen24的专栏
05-18 642
SAE的thinkphp下貌似没有cookie这个类。 　　在其下对cookie的操作参考其开发手册。 　　【cookie的设置】 　　cookie('name','value');   　　//设置cookie cookie('name','value',3600); // 指定cookie保存时间 　　这个是正确的。但是下面这个貌似就不太好使。 　　cookie('na
php curl 带入cookie,php采用curl带着cookie访问网页的方法
weixin_28997879的博客
03-09 2713
由于近段时间帮朋友开发一个能够查询正方教务系统的微信公众平台号。有所收获。这里总结下个人经验。开讲前，先吐槽一下新浪云服务器，一个程序里的 同一个函数在PC测试可以正常运行，在它那里就会挂的现象。老样子，我将在代码里注释清楚。使用下面的函数，将会获得两种形式的 cookie，一种保存在文件中，一种直接以变量的形式返回，经验提示： 有时候，在不同的代码运行环境中，带着文件cookie 去访问会成功，...
curl 携带cookie 数据
坚持就是胜利的博客
01-20 3715
PHP本地CURL正常，但是放到SAE上后出现object moved to here
12-31 540
login.php     error_reporting(E_ALL&~E_NOTICE); set_time_limit(0);     include 'curlajax.class.php';     //$proxy = "http://127.0.0.1:8087";      //init curlàà     $man = new curlajax();     $ma
php使用curl存储cookie的示例
10-26
4. 存储和使用cookie：使用`curl_setopt()`函数配合`CURLOPT_COOKIEJAR`选项设置一个文件存储响应的cookie，并在后续请求中使用`CURLOPT_COOKIEFILE`指定该文件。 5. 处理输出缓冲：使用`ob_start()`，`ob_get_...
curl不使用文件存取cookie php使用curl获取cookie示例
10-26
通过这个选项，curl会在后续的请求中带上相应的cookie，实现状态的保持。 6. 关闭curl会话 curl_exec执行之后，需要关闭curl会话，释放资源。使用curl_close函数来完成这个操作。 7. 不使用文件保存和读取cookie ...
PHP CURL中传递cookie的方法步骤
10-17
CURL中有三个主要的函数参数用于处理cookie：CURLOPT_COOKIE, CURLOPT_COOKIEFILE和CURLOPT_COOKIEJAR。CURLOPT_COOKIE用于直接设置请求中要发送的cookie数据；CURLOPT_COOKIEFILE用于指定一个文件来加载cookie数据...
curl函数说明(新)
12-19
cURL 是一个利用URL语法规定来传输文件和数据的工具，支持很多协议，如HTTP、FTP、TELNET等...很多小偷程序都是使用这个函数。 最爽的是，PHP也支持 cURL 库。本文将介绍 cURL 的一些高级特性，以及在PHP中如何运用它。
Cookie问题，本地服务器无问题，部署到SAE后未能获取cookie信息
twilight041132的专栏
06-27 3530
服务器端设置了cookie，希望关闭浏览器后下次再打开该网页时能够获取cookie信息。在本地服务器测试一切正常，将代码部署到SAE后，发现获取不到cookie内容。这里涉及到两个页面，下单成功页面中保存cookie，查看订单页面获取cookie信息。 下单页面的jsp文件设置cookie的代码如下： CookieBean cookieBean = new CookieBean(); cook
使用CURL发送cookie以及获得返回的cookie
偶尔一节
08-18 3万+
一个简单的curl函数： /** * 发送数据 * @param String $url 请求的地址 * @param Array $header 自定义的header数据 $header = array('x:y','language:zh','region:GZ'); * @param Array $content POST的数据 ...
curl加上cookie 并生成文件
wangwenzhe的博客
08-15 402
curl -b "JSESSIONID=B117FE58C3984C3F3A482C79684C9918" "http://localhost:8080/1" -X POST --output C:\Users\wangwenzhe\Desktop\temp\1.xls
php curl携带 cookie 请求
云烟阁
12-17 1万+
<?php header('Content-Type:text/html;charset=utf-8'); echo ""; function curl($cookie,$user_agent,$destURL, $paramStr='',$flag='get',$ip='10.57.22.151',$fromurl='http://www.baidu.com'){ $curl = curl
curl增加cookie
热门推荐
人生何处不相逢
09-27 4万+
用curl设置cookies 使用--cookie "COKKIES"选项来指定cookie，多个cookie使用分号分隔： curl http://man.linuxde.net --cookie "user=root;pass=123456"
Curl cookie设置
Csw_PHPer的博客
03-07 9847
有些网站为了防止非法爬取信息会在cookie里 添加一些信息，我们可以通过curl的cookie设置功能来访问网站示范网站：http://wenshu.court.gov.cn/1.首次访问网站，我们点开浏览器的F12看一下信息我们可以看到有个302重定向返回，我们打开看一下具体返回信息。 我们可以看到返回的信息中对cookie进行了设置，然后重定向到首页 我们可以通过curl对cookie
curl请求添加cookie
chinamen1的博客
03-06 4941
一个例子，使用curl 命令发送请求，一些需要登录鉴权的网站使用cookie的，可以添加cookie到请求中。 #添加自己的cookie ck="" #设置分页大小 ps=10 # 多次请求 for i in $(seq 1 2) do url="$uri?&page_idx=$i&page_size=$ps" echo "url: $url" #发送请求，--cookie设置cookie，-H 设置header # 返回的内容有压缩的，使用gunzip进行压缩 #结果保存到res.txt中
网易招聘的scrapy spider
最新发布
09-18
网易招聘的scrapy spider
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值