Leon Sun

一个菜鸟

暴力拆解hupu球员信息

之前写了一个拉取nba球员的脚本,是针对hupu网站上的数据进行拉取。由于水平一般,代码写的简单粗暴

hupu球队\球员信息的链接
可以看到球员球队信息。爬出所有球队的链接

teamList = []
response = urllib2.urlopen("http://g.hupu.com/nba/players/")
html = response.read()
def getTeams():
    Items = re.findall('<span class="team_name"><a href=".*?</a></span>',html,re.S)
    for item in Items:
        link = item.replace('<span class="team_name"><a href="','')
        team = re.findall('">.*?</a></span>',link,re.S)[0]
        link = 'http://g.hupu.com/'+link.replace(team,'')
        team = team.replace('">','').replace('</a></span>','')
        teamList.append(teamLink(team,link))

然后再爬出每个球员的详细页面

for team in teamList:
    getPlayers(team)

并且获得数据,存入数据库
这里写图片描述

github链接https://github.com/Leon1Sun/TestPython

阅读更多
文章标签: 爬虫
个人分类: python
想对作者说点什么? 我来说一句

球员数据库信息管理系统

2009年07月29日 41KB 下载

NBA球员信息管理系统

2013年11月04日 30KB 下载

没有更多推荐了,返回首页

加入CSDN,享受更精准的内容推荐,与500万程序员共同成长!
关闭
关闭