爬取双色球历史数据

最新推荐文章于 2024-05-07 19:46:59 发布

天蝎座的贱人

最新推荐文章于 2024-05-07 19:46:59 发布

阅读量5.5k

点赞数

分类专栏： python 文章标签：爬虫脚本

本文链接：https://blog.csdn.net/scopop/article/details/30508877

版权

爬取双色球历史数据

爬去地址：http://baidu.lecai.com/lottery/draw/list/50

需要的包：BeautifulSoup install

脚本如下运行后生成的数据json处理后存在data文件中

# -*- coding: utf-8 -*-
import urllib
import re
import json
from bs4 import BeautifulSoup


li = []

for year in range(2003, 2015):
    print year
    htmlcon = urllib.urlopen('http://baidu.lecai.com/lottery/draw/list/50?d=%s-01-01' % year)
    html = htmlcon.read()
    htmlcon.close()

    soup = BeautifulSoup(html)

    table_html_set = soup.findAll(id='draw_list')

    num_tuple_list = []
    for table_html in table_html_set:
        tr_html_set = table_html.findAll('tr')

        for tr_html in tr_html_set:
            span_html_set = tr_html.findAll('span', attrs&#