爬虫
python爬虫
Whale_XM
这个作者很懒,什么都没留下…
展开
-
python爬虫学习笔记(三)
上一篇介绍了request对象的基本用法,我们可以用创建Request对象的方法来,做更多的事,接下来我再总结一下其他应用。网页请求方式有Get和Post两种(我也没学过,应该是),这一篇,来讲用爬虫实现Get和Post请求。Get请求有点基础的应该知道,Get就请求直接在网址后面加参数,所有的信息就在url里,哦,你没有基础,没事,打开百度,百度搜索就是用的Get请求现在明白了这一点之...原创 2020-03-03 15:54:28 · 314 阅读 · 1 评论 -
python爬虫学习笔记(一)
前言由于我也不是什么专业人士,我也是在学习,这个就是我自己的一个学习笔记,什么爬虫可以做什么,为什么学爬虫我就不再赘述了,总结一点,爬虫用来爬取网页上的东西!python库在python中用到urllib和urllib2,urllib是python原生的一个库,urllib2是python创始人觉得urllib不好使自己又做的。python3将两个库合成了一个urllib库,需要什么东西基本...原创 2020-03-03 15:51:32 · 200 阅读 · 0 评论 -
python爬虫学习笔记(二)
上一篇介绍了爬虫的基本用法,用来简单的爬取了一个网站,我们直接用网址就访问了一个网站,但这样是很不好的,有的网站这样也进不去,打个比方,就像我们知道某个人的家庭住址,我们想找她的时候直接就闯了进去,也没说我们是谁,也没和他说我们要来找他,这样可以吗?当然不行!所以我们访问网站时还应该把我们伪装一下,伪装成一个浏览器,这样我们就算是个正常用户了。我们怎么来伪装呢?要执行更复杂的操作,我们需要给ur...原创 2020-03-03 15:53:14 · 110 阅读 · 0 评论