本篇文章内容:
1.pyspider框架使用方法
2.爬取樱花动漫网url,存到数据库。
3.源代码。
1.pyspider框架使用方法
安装和配置的过程,就不介绍了。参考官方文章。
如果你是在window下安装就直接下载源码就好。gthub源码。
安装好后运行,在linux下命令行执行
python3 run.py
window下运行安装包的 run.py
如果在命令行下反馈没有报错,就成功使用默认配置运行了pyspider。
你可以用浏览器访问 127.0.0.1:5000或者localhost:5000 ,也就是本机端口5000,如果是在云端服务上配置的,需要确保你对应的端口已经开启。
以阿里云服务器为例,你可以在
添加打开5000端口
在pyspider正常启动的情况下,浏览器访问超时,多数是因为上述端口没有打开。
到此,如果都没问题即可看到pyspider的网页界面。