【模型压缩】 LPPN论文阅读笔记

置顶 已于 2023-07-21 15:02:27 修改
阅读量689 收藏
点赞数
分类专栏： # 论文阅读笔记 人工智能 文章标签： 论文阅读 笔记
于 2023-07-21 15:01:58 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_44653420/article/details/131852302
版权

LPPN论文阅读笔记

LPPN: A Lightweight Network for Fast Phase Picking

背景

 深度学习模型的问题在于计算复杂度较高，在实际数据处理中需要面临较高的处理代价，且需要专用的加速处理设备，如GPU。随着数据累积，迫切需要设计一种能够保证精度的轻量化高速震相拾取模型，以提高处理海量数据的效率，这种模型同时可以方便地部署在设备端。

  • 具有更少的训练参数和轻量级网络在处理大规模数据集所需要
  • 轻量级网络保证CPU上的运行效率
  • 轻量级网络也减少训练所需要的标记数量
  • 嵌入式系统总是需要比较小的内存需求模型，轻量级网路的模型尺寸比较小，适合嵌入到现场进行地震信号处理
  • LPPN使用深度可分离卷积的优化减少模型参数 提高性能
  • 渴求轻量级网络和传统方法相当的拾取精度以及比较高的速度实现

LPPN首先对一小部分的波形的相位类型进行分类，然后使用回归输出所需要相位的准确起始时间。该结构使用深度卷积的优化减少了模型参数并且提高性能

模型设计

  • 相位选择包括两个任务：相位确定和起始时间选择
  • LPPN完成两个工作：确定时间序列小区间的相位类型和选择期望相位的时间，分别对应分类问题和回归问题
  • 深度神经网络根据从标记波形中学习到的特征来选择相位。特征数量和感受野是影响网络性能的两个重要因素。
  • 虽然更多的特征可以更好地描述波形，但是也会导致更高的计算成本，适当数量有助于不降低性能的情况下提高效率
  • 对于地震图，可以将感受野视为提取特征的时间窗口长度。接受野是CNN针对输入控件特定特征所关注的区域
  • 对于相位选择，来自更广泛的感受野的特征可以提高对P/S或噪声的分类可靠性

模型架构

  • 大多数相位拾取网络将输出每一个输入数据点的概率，那么LPPN的思路是输出连续的几个点的相位类型概率，降低计算成本

  • 首先确定是否存在所需的相位，然后选择相位时间

  • 如果输入的地震图长度是T个点，LPPN的总下采样率是S，那么有T/S概率输出 S是步长，每一个输出都是原始波形的一个小片段的概率，然后确定它所属的类型。第I个输出代表从Is到is + S - 1的S个采样点的概率，is是数据采样点的索引，对应于时间ti。那么准确的相位到达可能不精确的从ti开始。

  • 分类和回归都是基于从连续T点提取的特征，但是输出将减少到由步幅控制的T/S

  • 100HZ 30.71S 采样点是3072,那么采取大约30s的窗口来确保用于特征提取的足够长度。

在这里插入图片描述

  • 分类的损失使用交叉熵损失函数
  • 回归的损失函数使用均方差损失

LPPN的网络优化

  • LPPN设计用于在各种设备上运行，在训练时可以配置特征数量和步长，网络内部也进行优化
  • n代表模型的特征数目
  • 特征提取是通过七个CNN块进行的，每一个块执行两个任务：使用前一个块的特征并执行下采样来减少输出的长度，同时它扩展了特征的数量来恢复长度，将足够信息传递给下一个层。
  • 每一个块包括两个点卷积层和一个深度卷积层，形成一个卷积单元来取代传统的CNN卷积层，这样的优化将参数数量减少45%
  • 特征提取的输出被进一步输入到扩大感受野模块中，该模块使用三个下采样层和三个上采样层组成

LPPN的训练与性能评估

  • 对比PhaseNet数据集

  • 使用STEAD数据集

  • 评价指标

    • 预测和标记到达时间之间的时间残差的精度 召回率 平均值 标准差

  • one-hot向量：p [0,1,0] s[0,0,1] 噪声[1,0,0]

在这里插入图片描述

  • 真正的P到时位于该段内部，表明相位分类是正确的

  • 时间窗口是0.16s 说明窗口有16个点，

  • 分段的初始时间t在真正的P时间拾取之前，在加上回归模块提供的&t之后，预测的P时间更加接近真实的P时间

  • LPPN 可以使用不同的步长来节省内存占用并且加快相位拾取，但是较大的步长也会演唱回归的时间窗口，可能会导致比较低的精度

  • 测试发现，步长为16的中等模型可以在模型性能和计算成本方面提供平衡的配置

  • 对于所有模型，精度和召回率都随着信噪比的增加而增加，并且对于高信噪比，差异较小。对于低信噪比的波形，所有模型都表现出比较差的性能，但是参数比较多、步幅比较小的模型通常比其他模型更好，表明LPPN模型更适合处理期望比较低的SNR波形数据

讨论

  • LPPN是从目标检测模型修改来处理地震波形的。LPPN只输出S个连续点的一个概率来预测相位类型，而不是每个输入点的输出概率。
  • 可训练参数的数量表示模型的大小，内存需要存储这些参数，那么较大的步幅将减少内存需求
  • 当模型被训练并且应用于真实的数据集之后，模型的性能会下降，可以通过添加一些局部样本，通过迁移学习提高性能

STanford EArthquake Dataset (STEAD): A Global Data Set of Seismic Signals for AI

斯坦福地震数据集

  • 局部地震波形（350km地震内）
  • 没有地震信号的地震噪声波形
  • 地震通常由配备一个垂直和两个正交水平传感器的三分量一起记录
  • 第一个到达的脉冲是P波
  • 地震并不是产生地震波的唯一来源。
  • 尽管有数百TB的存档地震波形数据和数千万个人类拾取参数可用，但还没有存在用于地震波形的大型高质量标记基准数据集
  • 每个模型都使用不同的数据集进行训练和演示其性能。在没有标准基准的情况下，作者设置了自己的评估性能标准。这抑制了进展，因为它很难确定每种方法的相对性能以及优缺点
少写代码少看论文多多睡觉
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
专栏目录
LNMP（理论）
f5500的博客
01-14 208
LNMP在CentOS系统中，源码安装Nginx，使用RPM包安装MariaDB、PHP、PHP-FPM软件。 location匹配用户的地址栏(从域名后面开始),支持正则 server{ … … location / { root html; } location ~ .php$ { #匹配包含.php结尾的请求 root html; fastcgi_pass 127.0.0.1:9000 ...
shell脚本部署lnmp环境
yu1111huan的博客
01-17 188
根据别人的脚本改编 #!/bin/bash menu(){ clear echo "######################-Menu-#################" echo "#1.Install Nginx" echo "#2.Install MySQL" echo "#3.Install PHP" echo "#4.Exit Program" echo "############################################" } choice(){ read -p "
LNMP网络架构部署及应用（含discuz论坛的搭建）（转载）
forest_tree的博客
08-26 259
文章目录 前言 1.2：MySQL安装配置 1.3：PHP解析环境的安装 1.4：配置Ngnx支持PHP环境 1.5:常见的PHP开源产品介绍 二：LNMP应用部署（实操） 2.1：Nginx安装 2.1.1：编译安装步骤 2.1.2：使用systemctl控制 2.1.3：开启nginx，关闭防火墙 2.2：mysql编译安装 2.2.1：安装mysql环境依赖包 2.2.2：cmake配置和make和make install 2.2.3：设置/usr/local/mysql目录的权限 2.2.4：编辑配
文章摘要 lnmp的搭建
weixin_34272308的博客
02-08 161
1.为什么Nginx的性能要比Apache高得多？这得益于Nginx使用了最新的epoll（Linux 2.6内核）和kqueue（freebsd）网络I/O模型，而Apache则使用的是传统的select模型。目前Linux下能够承受高并发访问的Squid、Memcached都采用的是epoll网络I/O模型。　　处理大量的连接的读写，Apache所采用的select网络I...
LNMP架构及应用部署
看清所以看轻
09-05 1112
众所周知，LAMP平台是目前应用最为广泛的网站服务器架构，其中的“A” 对应着Web服务软件Apache HTTP Server。 随着Nginx在企业中的使用越来越多，LNMP (或 LEMP)架构也受到越来越多Linux系统工程师的青睐。 构建LNMP网站平台 就像构建LAMP平台一样,构建LNMP平台也需要Linux服务器. MySQL 数据库、PHP 解析环境,区别主要在Nginx与PHP...
centos下LNMP网站应用环境的部署
LSEC小陆的博客
08-22 1329
重点内容应用环境的部署 前时已说租用了一个服务器，购买了一个域名。解析域名之后，要想ftp自己的html文件并通过其他服务端进行访问，我们还需要对服务器进行环境的配置。服务器我用lnmp部署linux环境，centos比较适合搞服务器，这方面不是Ubuntu能比的。linux比起window系统主要通过命令行操作，搭建环境比较方便。一般的服务器软件主流有nginx和apache，可谓各有千秋。主
LNMP搭建
热门推荐
ChineseLiJie的博客
08-13 1万+
LNMP 文章目录LNMP源码包安装配置MySQL服务配置Nginx服务配置PHP服务搭建Discuz!论坛 LNMP动态网站部署架构是一套由Linux + Nginx + MySQL + PHP组成的动态网站系统解决方案，具有免费、高效、扩展性强且资源消耗低等优良特性。 源码包安装 在使用源码包安装服务程序之前，首先要让安装主机具备编译程序源码的环境，他需要具备C语言、C++语言、Perl语言...
浅谈搭建LNMP环境
Ibex-Relieved的专栏
05-01 579
前言 前置条件 首先要有一台linux 服务器，阿里云、腾讯云等等都行 由于我之前买的是腾讯云的服务器，本文就以腾讯云服务器为例 操作环境 LNUM linux 版本 nginx 版本 Mysql版本 Xshell版本 WordPress版本(5.0.3) 下载地址：https://cn.wordpress.org/download/ 安装步骤 Mysql 以及N...
完整构建LNMP，简单优化实现超高并…
05-30 7790
1.什么是LNMP？ 也许大家对LAMP比较熟悉，LAMP代表Linux下Apache、MySQL、PHP这种网站服务器架构；同上LNMP代表的就是Linux下Nginx、MySQL、PHP这种网站服务器架构。 2.我们为什么要采用LNMP这种架构呢? 使用Linux、PHP外加MySQL的优点我就无需多说相信大家也都很明了。 Nginx是一个轻量级且高效的Linux下的Web服务器软件，
linux配置lnmp实验心得,LNMP搭建总结分析.docx
weixin_29415429的博客
05-15 497
LNMP搭建总结搭建思路如图：安装顺序：L(Linux)操作系统------->M(mysql)数据库软件------------>P(php)php解析软件------>N(Nginx)网站服务软件Linux选择Linux发行版，我们选择centos6.6的64位操作系统来进行安装。选择minial最小化安装。Ip地址配置、ssh配置、selinux关闭、iptables防火墙...
浅谈LNMP架构
yunyuzhu的博客
10-17 955
LNMP的概念： LNMP代表的就是：Linux+Nginx+MySQL+PHP这种网站服务器架构。 • Linux：是一类Unix计算机操作系统的统称，是目前最流行的免费操作系统。代表版本有：debian、centos、ubuntu、fedora、gentoo等。 • Nginx：是一个高性能的HTTP和反向代理服务器，也是一个IMAP/POP3/SMTP代理服务器。 • M...
LNMP框架的基本简介及其原理
hetoto的博客
06-13 439
转载自：https://www.jianshu.com/p/caa57355175a
[转]LNMP环境下的Web常见问题排查（精品）
heiyeluren的blog（黑夜路人的开源世界）
10-09 2850
来源：http://mp.weixin.qq.com/s?__biz=MjM5NzUwNDA5MA==&mid=200596752&idx=1&sn=37ecae802f32f45ddc0240548943bcbe&scene=1
LNMP搭建，一篇文章足矣！
西西弗斯的巨石
05-21 1266
LNMP是Linux、Nginx、MySQL、PHP的首字母的组合，一个最常见的应用就是实现动态页面。本文详细介绍了手动搭建LNMP的方法。
LNMP环境搭建Wordpress博客
谢公子的博客
09-29 6537
目录 LNMP架构工作原理 yum源安装 网站源包安装 LNMP是Linux Nginx MySQL/MariaDB  Php/perl/python 的简称，是近些年才逐渐发展起来的构架，发展非常迅速，服务器以其轻巧快速而得到许多站长的青睐。 Nginx特点在于其相当的稳定、功能丰富、安装配置简单、低系统资源。 LNMP方式的优点：占用VPS资源较少，Nginx配置起来也比较简单，利用...
理解LNMP体系结构
SkyeInfo工作室
06-25 6505
理解LNMP体系结构 内容主要参考自http://www.cnblogs.com/it-cen/p/4320261.html?comefrom=http://blogread.cn/news/，感谢原博主。 LNMP就是Linux+Nginx+MySQL+PHP，Linux作为服务器的操作系统，MySQL即为数据库。本文主要介绍PHP和Nginx的关系。Nginx为一款高性能Web服务器，本身是
企业级lnmp架构讲解（一）lnmp架构简介、优缺点、工作原理、lamp的比较+FASTCGI和CGI的简介及原理
weixin_45649763的博客
03-01 2803
文章目录lnmp是什么lnmp架构的优点 lnmp是什么 LNMP是指一组通常一起使用来运行动态网站或者服务器的自由软件名称首字母缩写。L指Linux，N指Nginx，M一般指MySQL，也可以指MariaDB，P一般指PHP，也可以指Perl或Python。 lnmp架构的优点 1.作为 Web 服务器：相比 Apache，Nginx 使用更少的资源，支持更多的并发连接，体现更高的效率。 2. ...
LNMP
weixin_34024034的博客
12-13 94
目录 1.Nginx配置1 2.PHP解析2 2.1Mysql3 2.2服务安装3 2.3连接测试3 2.4数据配置4 3.Blogs4 环境： Mysql：19...
论文阅读笔记：DepGraph: Towards Any Structural Pruning
最新发布
HollowKnightz的博客
06-15 909
论文阅读笔记：DepGraph: Towards Any Structural Pruning
论文阅读Rolling-Unet，卷积结合MLP的图像分割模型
wwimhere的博客
06-12 870
2）接着，在Rolling操作之后，R-MLP在每个空间位置索引 (hi,wj) 上执行带有权重共享的通道投影，以编码长距离依赖性。通道投影是指在特征矩阵的每个空间位置（即图像的每个像素位置）上，对所有通道的特征进行线性变换，以生成新的特征表示。通道投影的目的是将Rolling操作后的多通道特征进行整合和编码，以捕获长距离依赖性。在Rolling操作之后，每个空间位置的特征图可能会有不同的宽度或高度特征。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

少写代码少看论文多多睡觉

求打赏，求关注，求点赞

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值