python爬虫(一)简单爬取文字写入txt

最近开始自学python爬虫,通过观看韦老师的教学视频。刚学会了用一些简单代码爬取一些网页上的文字,本人python代码亲测可用。我们选择爬取豆瓣网上(https://read.douban.com/provider/all)的出版社名字。

首先导入相应模块。并利用urllib.request.rulopen打开豆瓣网,并把读取到的数据赋值给data。


import urllib.request
import re
data=urllib.request.urlopen("https://read.douban.com/provider/all").read()

然后将读取到的数据解码。

data=data.decode("utf-8")

打开豆瓣网的源代码找到出版社出现位置。


构建正则表达式。

pat='="name">(.*?)<'
mydata=re.compile(pat).findall(data)
最后将爬取到的出版社存入到.txt文件下。最后不要忘记关闭文件。
file=open(
  • 7
    点赞
  • 57
    收藏
    觉得还不错? 一键收藏
  • 3
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 3
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值