python
菲菲老哥
这个作者很懒,什么都没留下…
展开
-
python:requests+beautifulsoup爬取静态网页图片
为练习python和爬虫,自己做了个抓取詹姆斯海报并保存在本地的小代码步骤1: 选择提供图片的网站URL http://desk.zol.com.cn/bizhi/5743_71437_2.html 步骤2: 用浏览器的网页分析工具,分析网页的元素,找到需要抓取的标签 这里我们用到了div,a,img等...原创 2019-09-27 16:10:35 · 1279 阅读 · 0 评论 -
一个简单项目:爬取图片+存入mongodb+Django前端显示二进制流图片
尝试实现一个demo项目:步骤1.将爬取的图片以二进制存入mongodb步骤2.从mongodb读取图片二进制流,在django前端Templates直接将二进制流显示为图片其中遇到好多坑,调试了好久才搞定,这里做一下记录步骤1:爬取图片并存入mongodb,这里爬取图片可以利用我上篇博客的requests+beautifulsoup的方式先存入本地,然后(方法一)利用p...原创 2019-10-07 19:42:09 · 1571 阅读 · 2 评论 -
scrapy结合selenium爬虫练习
在学习使用scrapy进行爬虫练习项目过程中遇到了一些问题,这里记录学习过程以及遇到问题的解决方法练习项目分为如下4个阶段:阶段1:scrapy抓取博客文章列表信息,包括url链接、文章名称、阅读数,并在终端用print打印出来阶段2:将抓取的信息保存成Json文件阶段3:将抓取的信息保存到MySQL数据库阶段4:scrapy结合selenium进行网站登录阶段1:...原创 2019-10-08 22:58:15 · 393 阅读 · 0 评论 -
Django入门教程思维导图梳理
在慕课网学了Django入门视频教程,这里梳理了下思维导图,方便复习原创 2019-10-07 18:58:02 · 354 阅读 · 0 评论