Linux实验一：正则表达式应用——提取当前时间点北京各监测站的PM2.5浓度

最新推荐文章于 2022-02-11 13:54:30 发布
最新推荐文章于 2022-02-11 13:54:30 发布
阅读量667 收藏 7
点赞数 1
分类专栏： Linux 文章标签： linux
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_43297914/article/details/116451825
版权
本文介绍了如何在Linux环境中利用正则表达式和相关工具，从网页中提取北京PM2.5监测数据。通过wget下载网页，sed命令替换HTML标签，awk处理数据，再到格式调整，最后将结果转换为CSV并传送到Windows，展示了一次完整的数据提取过程。
摘要由CSDN通过智能技术生成

Linux实验一：正则表达式应用——提取当前时间点北京各监测站的PM2.5浓度

实验要求

在这里插入图片描述

下载保存网页

首 先 百 度 PM2.5 北 京 监 测 点 的 网 页 , 所 选 网 址 是
http://www.86pm25.com/city/beijing.html
登录到服务器，用 wget 命令下载网页保存到 PM0.html 文件
在这里插入图片描述
然后查看一下 PM0.html

在这里插入图片描述

实验步骤

将< tr>< td>替换为空格

（1）由上图可以看出，如果我们要提取信息，需要将< tr>< td> 去掉更方便处理，于是使用 sed 命令，将< tr>< td>替换为空格，结果如下图：
在这里插入图片描述

最低0.47元/天 解锁文章
猫不让
关注
  • 1
    点赞
  • 踩
  • 7
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
剑指Offer——面试题19：正则表达式匹配
01-06
面试题19：正则表达式匹配 题目：请实现一个函数用来匹配包含’.‘和’*‘的正则表达式。模式中的字符’.‘表示任意一个字符，而’*’表示它前面的字符可以出现任意次（含0次）。在本题中，匹配是指字符串的所有字符...
Java正则表达式提取字符的方法实例
09-02
在Java编程语言中，正则表达式是一种强大的文本匹配工具，能够用于执行复杂的字符串匹配、搜索和替换操作。本文将详细介绍如何使用Java正则表达式提取字符串中的特定字符。 首先，了解什么是正则表达式是非常有必要...
Linux作业 北京各监测站的PM2.5浓度
m0_46262108的博客
11-08 656
完整代码： curl http://www.pm25china.net/beijing/ | awk '/更新时间/{print $0}/<td>/{print $0}' | sed 's/<[^<>]*>//g' | awk 'NR == 1;NR % 6 == 2 ; NR % 6 == 5{print $0}' | sed 's/ *//g' | sed 's/.*：//g' | tr '\r\n' ' ' | awk '/.*/{for(i=2;i<24
[SHELL SCRIPT] LINUX正则表达式 课堂作业 获取PM2.5天气信息
黑色低级高中生的博客
10-07 1884
#!/bin/bash rm result.txt rm beijing* wget http://www.pm25s.com/beijing.html if [ $? -ne 0 ]; then exit 1 fi echo "<INFO> DOWNLOAD PM_2_5 INFO FINISHED" DATE=$(grep -oP "(?<=数据更新时间：).*(?=</div>)" ./beijing.html) echo "<INFO> DATE.
Linux ——正则表达式过滤（以北京监测网站为例）
weixin_43952176的博客
04-20 1449
Linux ——正则表达式过滤（以北京监测网站为例） 一、实验内容 从因特网上搜索Web页，用wget获取网页，处理网页html文本数据，从中提取出当前时间点北京各监测站的PM2.5浓度，输出如下CSV格式数据： 2020-03-09 13:00:00,海淀区万柳,73 2020-03-09 13:00:00,昌平镇,67 2020-03-09 13:00:00,奥体中心,66 2020-03-0...
利用curl和wget修改时间
zhongxj183的博客
02-11 1276
当NTP未安装或无法使用时，或对时间的准确性要求不是特别高的情况下，可以利用crul和wget工具修改服务器时间 curl用法： yum install -y curl date -s "$(curl qq.com -v 2>&1 |grep Date: |cut -d' ' -f4-7)Z" wget用法： yum install -y wget date -s "$(wget -qSO- --max-redirect=0 qq.com 2>&1 |grep Dat
Linux 文件处理
weixin_44919631的博客
08-01 182
在Linux中文件时十分重要的，那今天就分享一下如果查看文件，和修改文件权限的方法 首先，如何查看文件，很简单，一个命令： ls -l 就可以查看文件类型了 效果如上图 接下来就有很多东西要讲解了，首先，打头一个d，然后他有一大堆wrx-组成的9位下面列个表格讲解 文件类型 属主权限 属组权限 其他用户权限 0位 1-3位 4-6位 7-9位 d:目录 r：读 r：读 r：...
linux shell 路径截取正则表达式
01-10
${file#*/}：拿掉第一条/及其左边的字串：dir1/dir2/dir3/my.file.txt ${file##*/}：拿掉最后一条/及其左边的字串：my.file.txt ${file#*.}：拿掉第一个.及其左边的字串：file.txt ${file##*.}：拿掉最后一个....
C# 正则应用之——最全的日期正则表达式 没有之一
04-25
### C# 正则应用之——最全的日期正则表达式 #### 1. 概述 在软件开发过程中，对于日期格式的处理是非常常见的需求。虽然大多数现代框架（如Winform和Webform）提供了丰富的日历控件用于日期的选择和校验，但在...
Python文本处理高手：正则表达式的应用与实践
最新发布
06-28
在Python中，正则表达式是一种强大的文本处理工具，它可以帮助我们快速搜索、替换、拆分和验证字符串。通过正则表达式，我们可以编写灵活的代码来处理各种复杂的文本数据。本文将详细介绍如何在Python中使用正则...
文件的格式化与相关处理
whime
10-29 169
格式化打印： printf 格式化输出，%8.2f 小数点占一位。 输出字符并换行。 awk：好用的数据处理工具 适合小型数据处理 $0代表整行，$1代表第一栏，$2代表第二栏。 awk的内置变量。   加上个换行格式化输出。 awk的逻辑运算符。   解决第一行没有正确显示。   计算薪资数据表 awk支持if...
LInux 读取文件内容
weixin_30301183的博客
08-10 102
1.cat 显示整个文件内容 -n 显示行号 2.tail -f 实时显示新增数据, -n 显示最后N行 3.head -n 显示前N行 4.sedsed -n '5,10p' input_file这样你就可以只查看文件的第5行到第10行。 组合使用： cat filename | tail -n +100 | head -n 60 读取文件的100行开始 ，读取60行...
写给互联网上从业的Web程序员
卢恪
06-16 906
程序员是一个脆弱、特殊的群体，以各种方式生存在有01的世界里。程序员的特点：狂躁，但是有修养随和，但是疯癫肯向任何人学，但是不服任何人守约，但是不守时感情丰富，但是单纯……Web程序是程序员中的一个别具特色的群体，他们有着和HTTP协议类似的无状态性、无序性、不可预测性。我这么说，是因为web程序员的出身、成分、学习途径、从业历程多种多样。Web程序员，是现今IT从业者中最具活力也最复杂的最可爱的
2018.2.13 写作业
weixin_30384217的博客
02-13 61
把hw6写完了，不过暂时不打算去看最后一章，因为要冲一波algo的进度啊，等到完成algo part 4的第一个作业之后再回来搞PL的最后一部分吧。 ruby写得真的是头都大了，处处感觉不顺手，后面最后一次作业据说也很难，不知道到时候会是啥感受。。。 转载于:https://www.cnblogs.com/dynasty919/p/8447625.html...
linux 如何显示一个文件的某几行(中间几行)
a12141986的博客
08-03 652
【一】从第3000行开始，显示1000行。即显示3000~3999行 cat filename | tail -n +3000 | head -n 1000 【二】显示1000行到3000行 cat filename| head -n3000| tail -n +1000 *注意两种方法的顺序 分解： tail -n 1000：显示最后1000...
shell正则匹配日期
热门推荐
。。
10-11 1万+
datestr='2015-05-1' if echo $datestr |grep -Eq "[0-9]{4}-[0-9]{1,2}-[0-9]{1,2}" && date -d $datestr +%Y%m%d >/dev/null 2>&1 then echo 'ok' else echo 'err' fi
linux 日期正则表达式,Linux Shell编程（5） - 正则表达式
weixin_34255938的博客
05-14 611
一、正则表达式简介1. 正则表达式是什么正则表达式用于描述字符排列和匹配模式的一种语法规则。它主要用于字符串的模式分割、匹配、查找及替换操作。2. 正则表达式与通配符/正则表达式通配符匹配主体文件中的内容文件名匹配规则包含匹配完全匹配常用命令grep,awk,sedls,find,cp3. 通配符* ：匹配任意0到多个字符? ：匹配任意一个字符[] ：匹配括号中的一个字符* 匹配任意0...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值