PHP学习手册八:使用curl模拟登陆,并抓取登陆后的页面内容

首先模拟登陆:

        $username = "abcde";
        $pwd = "123123";
        $url = "https://example.com/Login/index";
        $fields = array(
            "username" =>$username,
            "userpwd" =>$pwd
        );
        $cookie_file = "pic.cookie";    //cookie文件存放位置(保存登陆后的cookie用于在抓取登陆后页面使用)
        $ch  =  curl_init ();        
        // 设置URL和相应的选项
        curl_setopt ( $ch ,  CURLOPT_URL , $url);
        curl_setopt ( $ch,CURLOPT_POST,true);
        curl_setopt ( $ch,CURLOPT_POSTFIELDS,$fields);
        curl_setopt ( $ch, CURLOPT_USERAGENT, $GLOBALS ['user_agent'] ); // 模拟用户使用的浏览器

        curl_setopt ( $ch, CURLOPT_AUTOREFERER, 1 ); // 自动设置Referer
        curl_setopt ( $ch, CURLOPT_SSL_VERIFYPEER , 0 ); // 禁用后cURL将终止从服务端进行验证https。

        curl_setopt ( $ch, CURLOPT_TIMEOUT, 30 ); // 设置超时限制防止死循环
        curl_setopt ( $ch, CURLOPT_HEADER, 0 ); // 显示返回的Header区域内容
        curl_setopt ( $ch, CURLOPT_BINARYTRANSFER ,1 );
        curl_setopt($ch, CURLOPT_COOKIEJAR, $cookie_file);
        
        $html = curl_exec ( $ch );
        if(curl_errno  ( $ch ) == 0){
                //其他操作
        }else{
           echo curl_error($ch);//输出错误码 
        }

登陆成功后抓取需要登录才能访问的页面

        $url="https://www.example.com/user/index";
        $ch  =  curl_init ();
        $cookie_file = "pic.cookie";    //cookie文件存放位置
        // 设置URL和相应的选项
        curl_setopt ( $ch ,  CURLOPT_URL ,  $url);

        curl_setopt ( $ch, CURLOPT_USERAGENT, $GLOBALS ['user_agent'] ); // 模拟用户使用的浏览器

        curl_setopt ( $ch, CURLOPT_AUTOREFERER, 1 ); // 自动设置Referer
        curl_setopt ( $ch, CURLOPT_SSL_VERIFYPEER , 0 ); // 

        curl_setopt ( $ch, CURLOPT_TIMEOUT, 30 ); // 设置超时限制防止死循环
        curl_setopt ( $ch, CURLOPT_HEADER, 0 ); // 显示返回的Header区域内容
        curl_setopt ( $ch, CURLOPT_BINARYTRANSFER ,1 );
        curl_setopt($ch, CURLOPT_COOKIEFILE, $cookie_file);
        curl_setopt ( $ch, CURLOPT_RETURNTRANSFER ,1 );
        
        $html = curl_exec ( $ch );
         if(curl_errno  ( $ch ) == 0){
                //其他操作
        }else{
           echo curl_error($ch);//输出错误码 
        }

 

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

P P PHP

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值