Fishermen_sail-CSDN博客

原创毕业设计：《基于 Prometheus 和 ELK 的基础平台监控系统设计与实现》

基于 Prometheus 和 ELK 的基础平台监控系统设计与实现》，这是我在本科阶段的毕业设计，通过引入 Prometheus 和 ELK 架构实现企业对指标与日志的全方位监控。并且基于云原生，使用容器化持续集成部署的开发方式，通过 SpringBoot 和 Vue 的前后端分离技术，开发出基础平台监管系统，实现对所有基础平台的全面监控与可视化管理，让每一个监控项精确跟踪，每一个流程责任到人，每一个问题闭环处理。

2024-05-04 17:49:43 1304

原创电商评论文本挖掘

该项目是我在大三选修课（大数据分析与应用）的实验报告，我觉得文本挖掘的项目网上相对来说不是很多，我也是参考了许多Github上的项目，以及自己的一些所学，而完成的一个基础的文本挖掘项目。我觉的整体批注写的还比较全面，便于业余选手，或者只是想了解了解文本挖掘、机器学习、调调包的同学们学习。欢迎大家交流，源码在Github上。好评：好评数据（只上传了一些）。工具：所有代码中国另外需要读取的东西（我改变了原有的目录结构，如果下载下来要跑的话记得更改读取文件的目录）。差评：差评数据（只上传了一些）。READM

2022-11-03 00:31:25 1509 1

原创 Rust学习笔记（下）

笔记的内容主要参考与《Rust 程序设计语言》，一些也参考了《通过例子学 Rust》和《Rust语言圣经》。Rust学习笔记分为上中下，其它两个地址在Rust学习笔记（上）和Rust学习笔记（中）。

2024-05-11 14:11:55 1163 1

原创 Rust学习笔记（中）

笔记的内容主要参考与《Rust 程序设计语言》，一些也参考了《通过例子学 Rust》和《Rust语言圣经》。Rust学习笔记分为上中下，其它两个地址在我们可以使用泛型为像函数签名或结构体这样的项创建定义，这样它们就可以用于多种不同的具体数据类型。如下图，两个只在名称和签名中类型有所不同的函数，可以利用泛型优化它们。println!// 这里会报错largestprintln!println!选择T。

2024-05-11 14:05:14 1096

原创 Rust学习笔记（上）

笔记的内容主要参考与《Rust 程序设计语言》，一些也参考了《通过例子学 Rust》和《Rust语言圣经》。Rust学习笔记分为上中下，其它两个地址在。

2024-05-11 13:59:59 990

原创序列化的不同格式：JSON、XML、TOML、CSON、YAML

总的来说，每种格式均有其独特的侧重点，根据不同的使用场景可以选择不同的格式。JSON 简洁通用，YAML 功能全面可读性强，XML啰嗦但自描述能力强，TOML 紧凑易用但缺乏支持，CSON 则过于语言绑定。

2024-05-10 15:48:50 603

原创 Summary of some minor problems encountered while writing Rust

is a mutable reference to . When we try to change by , Rust will automatically dereferences to get the instance and then modifies the value of . So is equal to .But things are not so simple. We can see the following example. The first part is right. Bu

2024-05-08 22:27:45 838 3

原创 CLion 写 Rust 报Project directory `/Users/.../rsheets` does not exist.

原因是这样的，每当我们创建一个 Cargo 项目，CLion 的上方就会弹出下面这个提示，这是因为 CLion 会检查我们所打开的文件是否属于某个 Cargo 项目，如果没有就会提示你。比如像是可以快捷启动项目，还有像是跳转到一个包，这些如果你不 attach 是无法使用的。回归正题，这里报错其实就是因为你之前 attach 的项目找不见了，需要手动。，虽然不会影响你写代码，但每次看到还是不舒服，所以研究一下怎么解决。每次打开CLion都会看到像下面这样的报错，，这样就不会报错了。

2024-05-07 13:32:16 306

原创利用SpringBoot处理ELK监控结果

接下来运维人员按照自己的需求进行ElastAlert 的配置，配置好报警规则，ElastAlert会根据你的规则定期去 ElasticSearch 进行搜索，如有匹配，会通过 Webhook 的方式发送给Alertmanager，Alertmanager 作为一个中转站，统一了后端接受报警的格式。之后继续传递给SpringBoot 后端，在由SpringBoot 通过钉钉、邮箱、短信的方式通知对应的人，还会根据传来的报警信息的Label，进行数据的写入，以及相关操作，为之后的业务提供基础。

2024-05-04 19:35:20 184 2

原创利用SpringBoot处理Prometheus监控结果

下一步配置 Alertmanager 报警的规则，当达到报警要求时，Alertmanager 会通过 Webhook 的方式发送给 SpringBoot 后端，在由 SpringBoot 通过钉钉、邮箱、短信的方式通知对应的人，还会根据传来的报警信息的 Label，进行数据的写入，以及相关操作，为之后的业务提供基础。，如果对你有帮助可以点个 Star 支持一下。我们知道 Prometheus 可以做到监控报警的功能，但如果你自己想扩展，比如想用钉钉的方式去报警，就必须自己扩展。下图为该流程的时序图。

2024-05-04 19:10:47 167 1

原创 Termius: local terminal is not available in a sandbox

想在 Mac 上使用 Termius 的 SFTP 功能却无法使用，网络上没找见相关词条，最终在官方的介绍里找到了原因，遂作记录。简单来说，就是在 App Store 安装的 Termius 没有进入 local 的权限，需要从 Website 下载。

2024-03-16 10:51:49 1348 5

原创 Word如何粘贴时只粘贴文本不带格式（Mac）

不知道大家有没有特别烦在Word中Ctrl + V时，总会带原来的格式，有时候甚至点击匹配目标格式也匹配不了。为了解决这个问题，我想将Ctrl+V直接默认成为不带格式的粘贴。我根据《》这篇文章中的第二个回答成功实现了需求。

2024-02-08 19:19:21 1819

原创 Apriori介绍及代码批注

关联规则分析是数据挖掘中最活跃的研究方法之一，目的是在一个数据集中找到各项之间的关联关系，而这种关系并没有在数据中直接体现出来。以超市的销售数据为例，当存在很多商品时，可能的商品组合数量达到了令人望而却步的程度，这是提取关联规则的最大困难。因此各种关联规则分析算法从不同方面入手减少可能的搜索空间大小以及减少扫描数据的次数。Apriori算法是最经典的挖掘频繁项集的算法，第一次实现了在大数据集上的的关联规则提取，其核心思想是通过连接产生候选项及其支持度，然后通过剪枝生成频繁项集。

2023-10-28 18:56:29 298

原创 Redbook Chapter 7: Query Optimization翻译批注

首先说明一下redbook上的几篇文章是做什么的。这几篇文章是通过几位作者对不同方面的论文进行阅读和筛选后，挑出其中具备代表性或者权威的论文来做分析，为读者提供阅读指导和建议，同时，也是对某个方面的论文进行高度的总结，归纳和点评。第五版里面有几大块内容：背景和基础，新一代数据库，大规模数据处理，分布式，查询优化，交互分析，web数据等，以及两篇关于复杂分析和数据集成的最新技术分析。查询优化是数据库标志性的技术——是连接计算机语言与高效执行方式的桥梁。查询优化被誉为 DBMS 中最难实现的部分之一，因此这也是

2023-10-23 20:26:08 359

原创 “微软爱写作”连词摘录

今天突然发现个网站，叫做微软爱写作，确实是微软的，能帮你批改你的作文，还能给你的作文打分。“修改”的功能感觉不如Grammarly，这里它提的建议都不太对；“替换”的功能可以用用，积累点同义替换；“得分”这个功能太扯了，我的作文最多也就6或者6.5分，这里居然给了8分。它旁边有个“连词”我觉得挺全的，下面我将摘录下来，方便我日后查看。之前我也写过低配版的《英语连词总结》，这个更简单点。英文中文最后eventually最后ultimately最后finally最后最后英文语文换言之。

2023-09-14 01:57:32 1130

原创英语连词总结

in a word（开头逗号）in brief（简而言之，开头逗号）in conclusion（开头逗号）in short（开头逗号）to sum up（开头逗号）

2023-09-09 15:09:09 389

原创《凤凰架构》第三章——事务处理

事务处理主要的目的就是要让数据在各种条件下，最终的运行结果都能符合你的期望。要达成这个目标有三点需要满足：原子性（业务要么同时成功，要么同时被撤销）、隔离性（业务之间不会彼此影响）、持久性（提交的数据修改都能成功存入数据库中）。这些被称为事务的ACID特性。事务的处理分为以下4种：第一，本地事务，单个服务使用单个数据源的场景。它的事务的实现是完全依赖于数据源本身的事务本领的，并不会深入参与到事务的逻辑运作过程当中。

2023-09-03 14:08:37 1072

原创 Kaggle回归问题Mercedes——Benz Greener Manufacturing

这是我在大三选修课的课程设计，内容参考了Kaggle上高赞的代码，有详细批注，整体比较基础，结构相对完整，便于初学者学习。这个是一个回归问题，我的另外一篇博客《Kaggle分类问题Titanic——Machine Learning from Disaster》介绍了回归问题。除此之外我的《电商评论文本挖掘》也是我当年的课程设计，也有详细的批注，相比这个难度会稍微高些。题目背景：自1886年第一辆奔驰汽车问世以来，梅赛德斯奔驰一直代表着重要的汽车创新。

2023-08-24 05:33:38 1686

原创 Kaggle分类问题Titanic——Machine Learning from Disaster

这是我在大三选修课的课程设计，内容整体比较基础，结构相对完整，便于初学者学习。这个是一个分类问题，我的另外一篇博客“”介绍了回归问题。除此之外我的《电商评论文本挖掘》也是我当年的课程设计，也有详细的批注，相比这个难度会稍微高些。题目背景：在1912年4月15日，当时世界最豪华的游艇，泰坦尼克号撞到冰山沉入海底，其中船上2224位乘客中的1502位死在了此次事故中。在幸存者中，尽管有一些是来自于幸运，但是大部分幸存着是来自于女人、小孩还有一些贵族。而我们的任务就是通过机器学习，计算出人们幸存的概率。变量。

2023-08-24 05:16:18 766

原创 Scikit-learn强化学习代码批注及相关练习

木棒每保持平衡1个时间步，就得到1分。每一场游戏的最高得分为200分每一场游戏的结束条件为木棒倾斜角度大于41.8°或者已经达到200分。最终获胜条件为最近100场游戏的平均得分高于195。代码中env.step（），的返回值就分别代表了。观测Observation：当前step执行后，环境的观测。奖励Reward：执行上一步动作（action）后，智能体（agent）获得的奖励，不同的环境中奖励值变化范围也有不同，但是强化学习的目标就是总奖励值最大。

2023-08-23 15:23:57 875

原创 Scikit-learn降维与度量学习代码批注及相关练习

它有四个选项，linear：线性核函数,是在数据线性可分的情况下使用的，运算速度快，效果好，不足在于它不能处理线性不可分的数据，在下图中它的结果图和PCA一摸一样。randomized一般适用于数据量大，数据维度多同时主成分数目比例又较低的PCA降维，它使用了一些加快SVD的随机算法。PCA：通过投影矩阵（特征向量）将高维信息转到另外一个坐标系下，在经过SVD分解后，在某一维度上，数据分步更分散，越能代表主要特征，对数据分布情况的解释就更强，所以通过方差最大来衡量样本的分布情况，进而进行有效的低维判断。

2023-08-23 15:14:41 824

原创《凤凰架构》第二章——访问远程服务

1）看完这章，最大的一个问题，REST和RPC到底有什么区别？首先REST是基于HTTP的，我们这个问题可以先转换成HTTP和RPC的区别？HTTP和RPC同一级别，还是被RPC包含？答案是都可能。可以看下面这张图，如果你说的HTTP是HTTP通信协议，那么显然RPC是“包含”HTTP的，因为RPC指的是远程调用，是一个完整的远程调用方案，它包括了：接口规范+序列化反序列化规范+通信协议等。也就是只要是远程调用都可以叫RPC，RPC可以基于HTTP这种通信协议实现，比如gRPC，也可以基于其它的。

2023-08-18 14:54:42 866 1

原创 Scikit-learn聚类方法代码批注及相关练习

它的原因是在“db.core_sample_indices_”和“db.labels”，起初我以为“db.core_sample_indices_”会生成除噪音点以外的其他index，也就是区分开了噪音点与聚类点。但其实并不是，有少部分不在“db.core_sample_indices_”中的点也是聚类点，在下方打印出来的值分别与它俩相对，可以看见前者并没有为32的index，理论上它应该为-1噪音点，但打印出“db.labels”发现index为32的值是1，是一个聚类点。

2023-08-09 15:27:35 712

原创九分学长大作文笔记

最近看了《顾家北手把手教你雅思写作》，我觉得收获很少，逻辑感觉很乱，不知道为什么网上全是吹的。在Bilibili上看了九分学长，非常清晰，发现自己很多没有注意到的问题，下面将总结一些对我有用的部分。

2023-08-07 05:20:47 497

原创《凤凰架构》第一章——服务架构演进史

刚开始决定弄懂文中所提到的所有东西，就像我写ByteByteGo呢几篇文章一样，把每一句话都弄懂。但是对于《凤凰架构》来说，这有点太费时间了，并且没有必要，有些东西可能永远都不会用到，但文章为了全面的介绍一个内容，会提到那些东西。所以我还是针对一些自己的疑问，或是想知道的东西进行一些额外备注。我起初的想法是以博客的形式对文章进行概括，但在这个过程中，我发现很难概括，书中每一句话都有存在的必要，这本书真的非常干货，收获满满。原始分布式时代：计算机性能严重不足，对分布式进行了初步的探索。

2023-08-04 17:27:48 1210

原创 Github Flow工作流简单介绍（以部署为中心的开发模式）

这篇文章主要介绍Github Flow的理念，以下内容来源于《Github入门与实践》。Github Flow是以部署为中心的开发模式，通过简单的规则，持续高速且安全地进行部署。而Gitflow则是以发布为中心的分支管理模型，它提供了一种更灵活的方式来管理代码库中的更改。可以参考《Gitflow工作流简单介绍（以发布为中心的开发模式）》

2023-07-25 01:06:00 1000

原创 Gitflow工作流简单介绍（以发布为中心的开发模式）

这篇文章主要介绍Gitflow理念。以下有些内容来源于《Github入门与实践》。

2023-07-24 16:26:32 218

原创 Github上方导航栏介绍

直观的讲Tabs是一个字符，长度为2个空格，而Spaces是两个字符，也就是2个空格。Intent Size就是你按键盘上的Tab键时，空出的长度，有2、4、8（也就是你选Spaces，按电脑Tab键，就给你空2个空格；Fork：也就是把这个项目拉到你的仓库里，之后你可以对该代码进行修改，之后你可以发起Pull Request，简称PR，也就是合并到作者的代码。它的功能主要用于管理及发布一些没必要保存在仓库中的代码，比如小的代码片段等，还可以共享给别人，别人可以Fork，Clone等，和仓库的功能一样。

2023-07-24 13:12:33 870

原创 Scikit-learn集成学习代码批注及相关练习

AdaBoostClassifier的原理是先训练一个弱学习器模型，然后对他的结果进行评估，对于这个模型中做对的问题，我们将减少它的注意力，对于做错的问题我们将增大对他的注意力，从而在后续的新模型中，更专注克服前一个模型所不能解决的困难点，最后，当我们把所有模型整合在一起，构成一个大的框架，大框架中有处理简单问题的模型，也有处理困难问题的模型，使大框架的整体性能有所提高。而任务中修改基学习器的数量因该指的是修改n_estimators的大小，它是弱学习器的最大迭代次数，也可以说是最大的弱学习器的个数。

2023-07-21 16:43:00 306

原创 ERROR: ORA-12560: TNS: 协议适配器错误

这个问题的原因很简单，就是没有配Oracle的环境变量。由于是去年遇到的问题，我现在已经忘了具体配置什么变量，但可以肯定的是这个问题就是环境变量的原因。之前在Windows安装了Oracle，遇到了。

2023-07-10 18:35:06 601

原创 MySQL与Oracle的粗略对比

首先先说自己的感受，我第一次使用Oracle是在我第一次的实习当中，包括我也在Leetcode中做了一些题目来练习，大家也可以做做，还是有收获的。首先，我之前一直听说Oracle是要付费的，但其实它有免费版，我自己电脑上尝试装的是这个版本，具体阉割了什么，我就不说明了，我知道的是像partition不支持，但对于一般人来使用绝对够了。对于如果个人使用的话，如果是我自己肯定不会去用的，首先安装Oracle估计就得花很长时间，而且并不支持Docker（网上有，但我没有成功）。

2023-07-10 12:26:28 647

原创适合Docker的场景以及不适合的场景

利用其可移植性，镜像提供了除内核外完整的运行环境，确保了应用运行环境的一致性，可以方便的在不同环境中进行安装运行；利用其隔离性，可以不用像虚拟机一样，占用过多资源，而且也比虚拟机启动更快；让自己的运行环境不受外部干扰，让资源不会容易受到其他用户的影响（与可移植性类似）；可以方便的进行不同组件的管理，以及快速搭建系统的整体的环境；可以方便的对服务进行横向扩展利用以上特性，更加适合云原生的发展，实现像是持续集成和部署。由于隔离的限制，不适合桌面应用的安装；

2023-07-09 18:40:20 1290

原创 Windows页面置换算法与文件操作

由于期末临近，实在是没有时间来完成这个实验，在GitHub上找了一个作者的代码进行了阅读，LRU, FIFO, OPT三个算法思路还是比较清晰的，当然OPT是无法跑的，作者用了数据结构的方式来实现这三个方式，读起来有些复杂的，但思路还是很清晰的。如果自己写还是比较难写出来的，这个需要考虑的东西会很多，很容易出错。算法规则特点OPT优先淘汰最长时间内不会被访问的页面缺页率最小，性能最好，但无法实现FIFO优先淘汰最先进入内存的页面实现简单，但性能很差，可能出现Belady异常LRU。

2023-06-23 15:31:45 907

原创如何从Prometheus单独提取个别数据持久化到InfluxDB

Telegraf与Prometheus功能类似，也是采集指标的，一些不同之处在于Prometheus只能采集指标，而Telegraf什么也能采集，比如你想采集日志，就安装上对应插件，就可以采集日志了；InfluxDB是没有表的，它有一个叫bucket，这就相当于数据库，数据库里存放这些数据，第一个measurement其实就是代表了表；但是，从我们的使用场景出发，需要注意数据库的写入性能，通常，关系型数据库会采用B+数据结构，在数据写入时，有可能会触发叶裂变，从而产生了对磁盘的随机独写，降低写入速度。

2023-06-13 14:18:48 2079

原创对于后端Linux的入门知识

比如说对一些旧硬件的的支持、更新频度、对游戏的支持、界面的样式（有的压根没界面，只能用指令）、对触摸屏的支持、以及对一些特别事物的支持等等，都有自己的特色。虚拟的目录，是系统内存的映射，我们可以直接访问这个目录来，获取系统信息。第一个是表示属于谁（具体到每个人），第二个组，就是只要在这个小组里面的人都可是这个权限（在Linux系统中，用户是按组分类的，一个用户属于一个或多个组）。/mnt：临时挂载别的文件系统的，我们可以将光驱挂载在/mnt/上，然后进入该目录就可以查看光驱里的内容了。

2023-05-29 21:28:25 792

原创 Windows共享内存与死锁

总的来说这个实验还是很难的，花费了很长时间，也遇到了很多问题。首先为什么要映射，这其实是操作系统内存管理的知识，MapViewOfFile就是为了将此内存空间映射到进程的地址空间中。如果两个进程使用相同的DLL，只把DLL的代码页装入内存一次，其他所有映射这个DLL的进程只要共享这些代码页就可以了，如果利用消息机制实现IPC有交换的数据量小、携带的信息少等缺点。

2023-05-02 02:12:24 1320 1

原创关于钉钉第三方登录无法弹出二维码的问题

最后的最后，终于发现了原因，原因是因为我同时登录了“钉钉开放平台”，你把这里退出了，就可以有你想要的效果了。实现时，每次前端去跳请求页面时，都是这个已登录，看了好久文档都没找到原因，网上也查不到。这个实在是太坑了，废了我几个小时。

2023-04-05 06:16:54 1635

原创 OAuth2.0的大致理解及QQ和钉钉第三方登录的实现

OAuth2.0非常复杂，有很多的内容，我觉得这个偏向于安全领域，所以我作为一个后端就做一个简单的了解，不会深入，主要还是体现QQ的第三方登录的实现。具体在说明一下。这里对应的就是网站地址，你要给负责审核人员看这个。点击“QQ登录”后，跳出QQ登录页面（在没有通过审核时，这里不会出现二维码，会出现一串字，大概是说没有通过审核）（怎么跳到这里下面会写）。只有这样，QQ管理员才会通过你的审核，才能之后出现这个能扫码的东西。申请接入，获取appid和apikey；

2023-04-04 22:50:00 1474

原创 Windows线程间的同步

Windows有四种同步同步方式，分别是临界区、事件、信号量、互斥量。该实验中使用的是设置事件的方式，首先说明一下所需要用到的api。_beginthread：创建线程；CreateEvent：创建一个事件；SetEvent：将事件变为有信号可使用状态；ResetEvent：将事件信号进行复位，变为无信号；

2023-03-31 19:05:41 671

原创 SpringBoot引入Micrometer报“io.micrometer.prometheus.HistogramFlavor”

SpringBoot中有些依赖是不用写版本号的，因为继承了parent标签，人家SpringBoot就帮你定好了版本。，它主要是添加了一些默认的配置，像指定了使用的 JDK 版本号，编码方式，还有一些比较高级的像资源过滤、插件配置等，具体可参考。然后去掉了依赖版本，刷新了一下Maven发现不写版本也可以运行，SpringBoot已经帮你定好了版本。就可以了，因为SpringBoot的父依赖已经帮你确定好了。是因为导入依赖时版本的问题，上面是我最初导入的依赖，去掉。的版本了，确实是1.9.7。

2023-03-28 00:06:52 3305 1