Python mechanize模块

之前做题时遇到一道题可以用mechanize模块轻松的解决,于是找了这篇微博学习了一下么mechanize的一些简单用法:


mechanize是非常合适的模拟浏览器的模块,它的特点主要有:
1 http,https协议等。
2 简单的HTML表单填写。
3 浏览器历史记录和重载。
4 Referer的HTTP头的正确添加(可选)。
5 自动遵守robots.txt的。
6 自动处理HTTP-EQUIV和刷新。

所以你可以用mechanize来完成一些自动化浏览器想要做的事情,比如自动登录表单,自动填写表单等。

你可以使用easy_install mechanize或者 pip install mechanize来安装这个第三方模块


下面是简单实用例子

#导入模块##  
import mechanize  
import cookielib  
from BeautifulSoup import BeautifulSoup  
  
  
br = mechanize.Browser()  
cj = cookielib.LWPCookieJar()  
br.set_cookiejar(cj)##关联cookies  
  
###设置一些参数,因为是模拟客户端请求,所以要支持客户端的一些常用功能,比如gzip,referer等  
br.set_handle_equiv(True)  
br.set_handle_gzip(True)  
br.set_handle_redirect(True)  
br.set_handle_referer(True)  
br.set_handle_robots(False)  
  
br.set_handle_refresh(mechanize._http.HTTPRefreshProcessor(), max_time=1)  
  
###这个是degbug##你可以看到他中间的执行过程,对你调试代码有帮助  
br.set_debug_http(True)  
#br.set_debug_redirects(True)  
#br.set_debug_responses(True)  
  
br.addheaders = [('User-agent', 'Mozilla/5.0 (Windows; U; Windows NT 5.1; en-US; rv:1.9.1.11) Gecko/20100701 Firefox/3.5.11')]##模拟浏览器头  
response = br.open('http://xxx..com/')##自己设定一个url  
  
for f in br.forms():##有的页面有很多表单,你可以通过来查看  
print f  
  
br.select_form(nr=1)##选择表单1,  
  
br.form['username'] = '用户账户'  
br.form['password'] = '密码'  
  
br.submit()##提交表单  
  
print 'success login'


  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值