每日10行代码19:生成人民日报每日的首版链接

因为要爬取人民日报的新闻,所以需要一个功能来生成每日的链接,大概是这样的:
http://paper.people.com.cn/rmrb/html/2020-08/02/nbs.D110000renmrb_01.htm
并且点击每日的新闻链接也是首版,访问http://paper.people.com.cn/rmrb/html/2020-08/02/ 是会报错的。
下面是代码:

def make_dly_first_url(date):
    '''日期格式为:YYYY-MM-DD,如果小于10,十位补零'''
    base_url = r'http://paper.people.com.cn/rmrb/html/'
    first_url = "nbs.D110000renmrb_01.htm"
    dly_url = base_url + date[:7] + '/' + date[-2:] + '/'
    return dly_url + first_url
    

def test_make_dly_first_url():
    start = '2019-01-01'
    end = '2020-09-01'
     
    datestart = datetime.datetime.strptime(start, '%Y-%m-%d')
    dateend = datetime.datetime.strptime(end, '%Y-%m-%d')
 
    while datestart < dateend:
        datestart += datetime.timedelta(days=1)
        print(make_dly_first_url(datestart.strftime('%Y-%m-%d')))

test_make_dly_first_url()

输出结果:

http://paper.people.com.cn/rmrb/html/2019-01/02/nbs.D110000renmrb_01.htm
http://paper.people.com.cn/rmrb/html/2019-01/03/nbs.D110000renmrb_01.htm
http://paper.people.com.cn/rmrb/html/2019-01/04/nbs.D110000renmrb_01.htm
……

make_dly_first_url 是生成url的函数,test_make_dly_first_url 是测试函数,以前看过测试驱动的开发方法,现在感觉这种方法还是有一定的意义的。不过我的测试代码还是写的很烂,也没用到测试工具类。

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值