东方财富:网址和项目名称爬取

平安银行(000001)资金流向 _ 数据中心 _ 东方财富网 (eastmoney.com)

#导包
import requests
from bs4 import BeautifulSoup
import pandas as pd

【第一步】下载页面的HTML

构造函数download_all_htmls,下载页面的HTML

1、用requests.get函数获取html网页(构造一个向服务器请求资源的url对象,返回的是一个包含服务器资源的Response对象)

2、r.status_code返回http请求的返回状态:200表示连接成功,返回418表示爬取的网站有反爬虫机制,要向服务器发出爬虫请求,需要添加请求头headers

3、htmls.append(r.text)添加url对应的页面内容到列表htmls

def download_all_htmls():
    htmls=[]
    url=f"http://data.eastmoney.com/zjlx/000001.html"
    print(url)
    r=requests.get(url)
    if r.status_code!=200:
        raise Exception("error")
    print(r)
    htmls.append(r.text)
    return htmls

【第二步】解析HTML得到数据

构造函数parse_single_html&#

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值