制作爬虫的基本步骤
一般来说，制作一个爬虫需要分以下几个步骤：
1. 分析需求(对，需求分析非常重要，不要告诉我你老师没教你)
2. 分析网页源代码，配合F12(没有F12那么乱的网页源代码，你想看死我？)
3. 编写正则表达式或者XPath表达式(就是前面说的那个神器)
4. 正式编写python爬虫代码
效果
运行：
恩，让我输入关键词，让我想想，输入什么好呢？好像有点暴露爱好了。
回车
好像开始下载了！好赞！，我看看下载的图片，哇瞬间我感觉我又补充了好多表情包….
好了，差不多就是这么个东西。
需求分析
”我想要图片，我又不想上网搜“
”最好还能自动下载”
……
这就是需求，好了，我们开始分析需求，首先，搜索图片，最容易想到的就是爬百度图片的结果，好，那我们就上百度图片看看
基本就是这样，还挺漂亮的。
我们试着搜一个东西，我打一个暴字，出来一系列搜索结果，这说明什么….
随便找一个回车
好了，我们已经看到了很多图片了，如果我们能把这里面的图片都爬下来就好了。我们看见网址里有关键词信息
我们试着在网址直接换下关键词，跳转了有没有！
这样，可以通过这个网址查找特定的关键词的图片，所以理论上，我们可以不用打开网页就能搜索特定的图片了。下个问题就是如何实现自动下载，其实利用之前的知识，我们知道可以用request，获取图片的网址，然后把它爬下来，保存成.jpg就行了。
所以这个项目就应该可以完成了。
分析网页
好了，我们开始做下一步，分析网页源代码。这里 我先切换回传统页面，为什么这样做，因为目前百度图片采用的是瀑布流模式，动态加载图片，处理起来很麻烦，传统的翻页界面就好很多了。
这里还一个技巧，就是：能爬手机版就不要爬电脑版，因为手机版的代码很清晰，很容易获取需要的内容。
好了，切换回传统版本了，还是有页码的看的舒服。
我们点击右键，查看源代码
这都是什么鬼，怎么可能看清！！
这个时候，就要用F12了，开发者工具！我们回到上一页面，按F12，出来下面这个工具栏，我们需要用的就是左上角那个东西，一个是鼠标跟随，一个是切换手机版本，都对我们很有用。我们这里用第一个
然后选择你想看源代码的地方，就可以发现，下面的代码区自动定位到了这个位置，是不是很NB!
我们复制这个地址
然后到刚才的乱七八糟的源代码里搜索一下，发现它的位置了！(小样！我还找不到你！)但是这里我们又疑惑了，这个图片怎么有这么多地址，到底用哪个呢？我们可以看到有thumbURL，middleURL，hoverURL，objURL
相关报道：
php json_encode与json_encode的方法 一、json_encode() 该函数主要用来将数组和对象，转换为json格式。先看一个数组转换的例 更多
很多seoer在做站前，最害怕百度看不上。也就是百度考核期。主要是百度不收录你的页面、没有索引量。一般考核期在1-3个月，那我们该如何快速的融入百度家族，下面小女就跟大家分享一下关于百度考核期seoer该注意哪些问题。 1、网站是否是一个稳定的空间 一个 更多
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
