网络爬虫 爬取心血管数据

本文介绍如何利用Python进行网络爬虫,从指定网站抓取心血管疾病的相关数据集,包括CVRG数据,为医学研究提供数据支持。
摘要由CSDN通过智能技术生成

# ! /usr/bin/python
# -*- coding: utf8 -*-
# @Time    : 2019/10/23 
# @Author  : zhang

import requests
from urllib.request import urlopen
from bs4 import BeautifulSoup
import os
def  parameters(pathsave,last,path):    #获取参数
    html = urlopen(path + last)  # 获取网页
    bs = BeautifulSoup(html, 'html.parser')  # 解析网页
    hyperlink = bs.find_all('a')  # 获取所有超链接
    pathsavenew = pathsave + last
    if not os.path.exists(pathsavenew):
        os.makedirs(pathsavenew)
    for h1 in hyperlink :
        hh = h1.get('href')
        if '.mat' in hh:
            html = requests.get(path + last + hh)
            with open(pathsavenew + hh, "wb") as f:
                f.write(html.content)
        if '.txt' in hh:
            html = requests.get(path + last + hh)
            with open(pathsavenew + hh, "wb") as f:
                f.write(html.content)

def  RawDat
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值