利用用python爬虫实现定时QQ邮箱推送英文文章,辅助学习英语,再也不用担心英文不好啦!

自从在上海上了大学后愈加的感觉英文的重要性,其实自己学习英文的意愿还是有的,但是就是总因为各种琐碎的小事忘记,于是想要借用自己擅长的python帮助自己。

当然,定时推送英文文章只是一部分,接下来我准备根据艾宾浩斯遗忘曲线定时的给自己推送单词,帮助自己提升英文水评。

当然,如果各位有什么好的想法与建议可以提出来,我们一起实现。


项目总分为两个总模块,分别是爬虫模块邮件发送模块


首先,我们来看爬虫模块:

爬虫模块

爬虫模块分为两个部分分别是索引爬虫文章爬虫,其功能分别是爬取文章的链接和爬取文章的内容。

分别选择可可英语的双语新闻沪江英语的双语新闻

1 索引爬虫

代码的详细解释都在对应的注释里面
index_spider.py

#auther : keepython
import requests
from lxml import etree
import time
import re

#http://www.kekenet.com/read/news/
#https://www.hjenglish.com/new/fanyiyuedu/
#index_spider是可可英语的索引爬虫
def index_spider():
	index_url = 'http://www.kekenet.com/read/news/'#将双语新闻的链接内置在函数里面
	page_html = requests.get(index_url)#用get的方式拿到对应页面的内容
	page_html.encoding = 'utf-8'#进行utf8编码
	selector = etree.HTML(page_html.text)#对经过编码的内容进行进一步处理方便使用xpath提取链接
	# 使用xpath语法从当前页面的源代码中提取数据由于xpath筛选后返回的是列表格式的数据,我
  • 7
    点赞
  • 7
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值