爬取某网站的潮汐数据

本文介绍如何爬取一个网站的潮汐数据,包括处理网页格式变化后的爬取策略,涉及从JSON数据中提取信息。
摘要由CSDN通过智能技术生成

爬取某网站的潮汐数据

import re,os
import requests
import datetime
import random
import time

headers = {
   'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/78.0.3904.108 Safari/537.36'}

def post_html(url,date):
    files = {
   "date":(None,date)}
    html = requests.post(url,files = files).text
    print(html)
    return html


#获取html
def get_html(url):
    html = requests.get(url, headers=headers).text
    return html

#潮时
def get_chaoshi(html):
    resa = r'<tr>.*?<td>潮时</td>(.*?)</tr>'
    contenta = re.compile(resa, re.DOTALL).findall(html)
    resb = '<td>(.*?)</td>'
    contentb = re.compile(resb, re.DOTALL).findall(contenta[0])
    return contentb
#潮高
def get_chaogao(html):
    resa = r'<tr>.*?<td>潮高(峰值)</td>(.*?)</tr>'
    resa = '<td>潮高.*?</td>(.*?)</tr>'
    contenta = re.compile(resa, re.DOTALL).findall(html)
    resb = '<td>(.*?)cm</td>'
    contentb = re.compile
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值