php杂（一）-------------------- 爬虫curl （post）

PHP中使用cURL实现Get和Post请求的方法，来制作爬虫。

<?php
//把post_data数组转换成字符串
function postUrl($post_data = ''){
	if (empty($post_data)) {
		return false;
	}
	$o ='';
	foreach ($post_data as $key => $value) {
		$o.= "$key=".urlencode($value)."&";
	}
	$post_data =substr($o,0,-1);//取出字符串从0开始到结尾
	return $post_data;
}


$url = 'http://news.baidu.com/sn/api/feed_feedlist?pd=newsplus&from=app';

$post_data['action'] = 1;
$curlPost = postUrl($post_data);
$ch = curl_init();
curl_setopt($ch, CURLOPT_URL, $url);

curl_setopt($ch, CURLOPT_VERBOSE, true);
curl_setopt($ch, CURLOPT_HEADER, true);//是否返回header
curl_setopt($ch, CURLOPT_NOBODY, 0);//是否返回body，1为不返回，2返回返回json类型不会去掉数据当返回html时去掉数据html


//是否post提交方式
curl_setopt($ch, CURLOPT_POST, 1);
curl_setopt($ch, CURLOPT_POSTFIELDS, $curlPost);

curl_setopt($ch, CURLOPT_RETURNTRANSFER, true);//要求结果为字符串且输出到屏幕上
curl_setopt($ch, CURLOPT_TIMEOUT, 20);//超时时间

// $ret 返回跳转信息
$text = $ret = curl_exec($ch);
// $info 以 array 形式返回跳转信息
$info = curl_getinfo($ch);
// 跳转后的 URL 信息
$retURL = $info['url'];
// 记得关闭curl
curl_close($ch);

echo $ret;