如何通过PHP进行数据采集

最新推荐文章于 2023-01-17 10:51:37 发布

q56731523

最新推荐文章于 2023-01-17 10:51:37 发布

阅读量486

点赞数

文章标签： php 开发语言网页爬虫大数据分析

本文链接：https://blog.csdn.net/weixin_44617651/article/details/128231091

版权

随着信息时代的到来，现在大部分人获取的信息都来自互联网，如果对自己有用的数据使用传统的复制粘贴，效率会极其低下。如何才能快速的完成批量采集工作呢？下面我们就聊一聊关于PHP采集的一些事！

采集就是使用file_get_contents函数和正则的使用。

先贴上一段代码

<!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-transitional.dtd">
 <html xmlns="http://www.w3.org/1999/xhtml">
 <head>
 <meta http-equiv="Content-Type" content="text/html; charset=gb2312" />
 <title>无标题文档</title>
 </head>
<body>
 <?php
 $file=file_get_contents("http://nitnews.nyist.net/list_59.html");
 $preg1="#<LI><A title=(.*) href=\"(.*)\" target=_blank>(.*)</A><SPAN>&nbsp;&nbsp;(.*)</SPAN> </LI>#iUs";
 preg_match_all($preg1,$file,$arr);
 //print_r($arr);exit();
 foreach($arr[1] as $id=>$val)
 {
 //echo "<a href=\"http://nitnews.nyist.net/".$arr[2][$id]."\">".$val."</a><br />";
 echo "<a href=\"content.php?url="."http://nitnews.nyist.net/".$arr[2][$id]."\">".$val."</a><br />";
 }
?>
 </body>
 </html>
[/php]
 [php]
<!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-transitional.dtd">
 <html xmlns="http://www.w3.org/1999/xhtml">
 <head>
 <meta http-equiv="Content-Type" content="text/html; charset=gb2312" />
 <title>无标题文档</title>
 </head>
<body>
<?php
 function GetInfo($preg,$con,$num=1)
 {
 preg_match($preg,$con,$arr);
 $arr[$num]=str_replace("src=\"/upFile/","src=\"http://nitnews.nyist.net/upFile/",$arr[$num]);
 return $arr[$num];
 }
 $url=$_GET[‘url’];
 $content=file_get_contents($url);
 $pr="@<H1>(.*)</H1>@iUs";
 echo "文章标题是：".GetInfo($pr,$content);
 $con="#<!–正文内容开始–>(.*)<!–正文内容结束–>#iUs";
 echo "文章内容是：".GetInfo($con,$content);
 ?>
 </body>
 </html>