python 打开百度贴吧 并且下载网页信息保存到本地

简单的需求 ,访问某个百度贴吧,并且把信息保存下来。

from urllib import  request,parse
import random
def tieba():
    data = {
        "kw" : "魔方" ,
        "ie" : "utf-8",
        "pn" :  0
     }
    urls = []
    httpurl = 'http://tieba.baidu.com/f?'
    for t in range(10):
        pn = t * 50
        data['pn'] = str(pn)
        urls.append(httpurl + parse.urlencode(data))
    print(urls)
    for url in urls:
        rsp = request.urlopen(url).read()
        #html = rsp.read().decode()
        #print(html)
        tt = str(random.randint(0,99))
        fp = open(tt +".html", "w+b")  # 打开一个文本文件
        fp.write(rsp)  # 写入数据
        fp.close()  # 关闭文件
if __name__ == '__main__':
    tieba()
  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值