因为笔者经常投彩票,于是做了一个玩,初版本只是爬取,效果如下:
代码如下:
import requests
from requests.exceptions import RequestException
from lxml import etree
count = 0
def get_page(url):
try:
headers = {
'user-agent': 'Mozilla/5.0 (Linux; Android 6.0; Nexus 5 Build/MRA58N) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/70.0.3538.110 Mobile Safari/537.36',
'accept-language': 'zh-CN,zh;q=0.9',
'cache-control': 'max-age=0',
'accept': 'text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,image/apng,*/*;q=0.8'
}
response = requests.get(url=url,headers=headers)
# 更改编码方式,否则会出现乱码的情况
response.encoding = "utf-8"
if response.status_code == 200:
return response.text
return None
except RequestException:
return None
def parse_page(html):
try:
global count
count+=1
res = etree.HTML(html)
red = res.xpath('//*[@class="smallRedball"]//text()')
blue = res.xpath('//*[@class="smallBlueball"]//text()')
print(red+blue)
except Exception as e:
pass
def main(num):
url = 'http://caipiao.163.com/t/award/dlt/{}.html'.format(str(num))
html = get_page(url)
parse_page(html)
if __name__ == '__main__':
for num in range(17001,17154):
main(num)
for num in range(18001, 18140):
main(num)
print("大乐透爬取结束...")
print("爬取的数目为:"+str(count))
另外怕大家不会使用,直接给大家准备了写好的,直接下载打开即可使用!
源码放在百度云盘上了需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】
一、Python学习大纲
Python所有方向的技术点做的整理,形成各个领域的知识点汇总,它的用处就在于,你可以按照上面的知识点去找对应的学习资源,保证自己学得较为全面。
二、入门学习视频
三、实战案例
光学理论是没用的,要学会跟着一起敲,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。
四、python副业兼职与全职路线
上面的所有资料我全部打包好了并且上传至CSDN官方,需要的点击👇获取!