一：实现功能
获取（电影天堂）电影详情页链接，再获取电影名字以及下载地址，在控制台输出
二：思路
1、爬取（电影天堂）首页电影详情页所有链接，如图所示
2、查看抓取内容网页源码------看适合用那种方法抽取结果
3、将第二步抽取的链接加入请求队列中-----进行二次请求
4、获取电影的名字和下载地址-----如下图所示
5
三：代码实现
前面步骤还是如上次写的WebMagic(一)：<
本文介绍了如何使用WebMagic爬虫框架从电影天堂网站抓取电影详情页链接，进而获取电影名称和下载地址。首先，爬取首页电影链接，通过分析网页源码确定抽取方法。接着，将链接放入请求队列进行二次请求，最终在控制台输出电影名字和下载链接。
最低0.47元/天 解锁文章
529
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
