Python爬虫实现验证码登录

原创  2016年11月13日 15:17:13

• 标签：
• cookie /
• python /
• 爬虫

• 5800

很多网站为了避免被恶意访问，需要设置验证码登录，避免非人类的访问，Python爬虫实现验证码登录的原理则是先到登录页面将生成的验证码保存下来，然后人为输入后，包装后再POST给服务器，实现验证，这里还涉及到了Cookie，其实Cookie保存在本地主机上，避免用户重复输入用户名和密码，在连接服务器的时候将访问连接和Cookie组装起来POST给服务器。这里涉及到了两次向服务器POST，一次是Cookie,这里还自行设计想要Cookie的内容，由于是要登录，Cookie中存放的则是用户名和密码。第二次POST则是向服务器提交验证。

这里用到Python3,主要用到的包是re  urllib.request   http.cookiejar

上代码，借鉴了别人的代码~~~

[python]  view plain  copy

1. import re  
2. import urllib.request  
3. import http.cookiejar  
4. #from http.comkie import CookieJar  上面那句和这句等同  
5.   
6. loginurl='https://www.douban.com/accounts/login'  
7. cookie = http.cookiejar.CookieJar()  
8. opener = urllib.request.build_opener(urllib.request.HTTPCookieProcessor)#在已存的Cookie下建立连接  
9.   
10. params={}  
11. params['form_email']='用户名'  
12. params['form_password']='密码'#这里写上已有的用户名和密码  
13. params['source']='http://www.douban.com/accounts/login'  
14.   
15. #从首页提交登陆  
16. response = opener.open(loginurl,urllib.parse.urlencode(params).encode('utf-8'))#urllib.parse.urlencode(params).encode('utf-8')这个是向服务  
17. #器POST的内容，可以打印一下response.geturl()请求的连接看一下  
18. #print(response.geturl()[0:33])  
19. #验证成功跳转至登陆页  
20. if response.geturl()[0:33]=='https://accounts.douban.com/login':  
21.        html = response.read().decode('utf-8')  
22.        #print(html)，可以先打印一下文件内容，为了看到网页元素更方便的写正则，可以复制下来，在需要获取的地方用(.+?)表示，然后用group()元组来取得，  
23.        #验证图片地址  
24.        imgurl=re.search('<img id="captcha_image" src="(.+?)" alt="captcha" class="captcha_image"/>',html)  
25.        if imgurl:  
26.               url=imgurl.group(1)  
27.               #print(url)  
28.               #将验证码以v.jpg保存在本地，在输入验证码的时候可以手工输入  
29.               res=urllib.request.urlretrieve(url,'v.jpg')  
30.               captcha = re.search('<input type="hidden" name="captcha-id" value="(.+?)"/>',html)  
31.               #print(captcha.group(1))  
32.               if captcha:  
33.                      vcode=input('请输入图片上的验证码：')  
34.                      params["captcha-solution"] = vcode  
35.                      params["captcha-id"] = captcha.group(1)#这个是动态生成的，需要从网页中获得  
36.                      params["user_login"] = "登录"  
37.                      #提交验证码验证  
38.                      response = opener.open(loginurl,urllib.parse.urlencode(params).encode('utf-8'))  
39.                      if response.geturl()=="https://www.douban.com/":  
40.                             print("login sucess")  
41.