cURL
叶先生i
精致的程序猿一枚
展开
-
PHP cURL使用代理IP爬取页面
话不多说直接上完整代码:$curl = curl_init();$user_agent = "Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/29.0.1547.66 Safari/537.36";$url = "https://www.douban.com/"; //访问豆...原创 2019-07-19 15:28:23 · 660 阅读 · 1 评论 -
PHP cURL使用多线程爬取网页内容
把要爬取的网页的url放到一个数组里,本文以爬取豆瓣租房信息为例,在豆瓣搜索租房查看网页布局后再参考代码更好,具体代码如下:$j = -25;for ($i = 0; $i < ‘要爬取前几页的页数’; $i++) { $get_start = $j = $j +25; $urls[$i] = "https://www.douban.com/group/".‘城市分组名’...原创 2019-07-22 09:10:49 · 313 阅读 · 0 评论