筑梦之路

原创 CentOS 7.9 停止维护(2024-6-30)后可用在线yum源 —— 筑梦之路

众所周知，centos 7 在2024年6月30日，生命周期结束，官方不再进行支持维护，而很多环境一时之间无法完全更新替换操作系统，因此对于yum源还是需要的，特别是对于互联网环境来说，在线yum源使用方便很多，而不需要去搭建本地yum源和内网yum源。这里以阿里云为例，其他国内开源镜像站类似。

原创 centos 7 制作openssh8.7/8.8/8.9/9.0/9.1/9.2/9.3 p1 rpm包升级——筑梦之路

注意：我这边所有的操作系统都是最小化安装，并在我的环境里面经过测试验证的，由于各种环境有所区别，请根据自己实际情况，测试好之后再上生产，若自己操作不当，造成服务器失联请自行承担后果！已经制作适合centos 6 redhat 6系列系统的openssh 8.7 8.8 8.9 rpm包，详情见我的资源。适用于centos 7 rhel7的ssh-copy-id，版本openssh 9.1p1。openssh 9.2p1版本的rpm包见我最新的资源。制作完成的rpm包见我的资源，使用教程如上所示。

原创 解决Android studio 编译flutter项目 卡在Running Gradle task ‘assembleDebug‘ ——筑梦之路

我也查过很多资料，网上很多资料要么是gradle构建工具没下载下来，下载太慢，要么是修改了项目里面的配置，要么是修改全局的flutter.gradle配置，都还是存在一些问题，我通过修改这四处配置，成功运行。修改fluttersdk目录下文件packages\flutter_tools\lib\src\http_host_validator.dart。项目的时候，会出现各种问题，踩了一个又一个，最后编译的时候可能会出现一直显示。修改完成后，再build，就可以正常构建了！最后一处，项目中的配置，修改。...

原创 树莓派3B 搭建机器学习环境，安装TensorFlow开源库

手头上有几块树莓派的板子，平时也只是拿来做一些linux下的测试以及看电视，也无暇去研究电路以及购买诸多的传感器来做其他的开发项目，春节期间放假有空来搞了下机器学习，身边又没有支持gpu加速的显卡，却发现安装个TensorFlow开源库也比较艰辛，因此在此记录下，使用树莓派搭建机器学习开发的环境，希望可以共同学习，交流以及进步！准备：树莓派3b裸板一块，putty或者xshell远程工具...

转载 国内可用的ntp服务器地址

ntp.sjtu.edu.cn 202.120.2.101 (上海交通大学网络中心NTP服务器地址）s1a.time.edu.cn 北京邮电大学s1b.time.edu.cn 清华大学s1c.time.edu.cn 北京大学s1d.time.edu.cn 东南大学s1e.time.edu.cn 清华大学s2a.time.edu.cn 清华大学s2b.time.edu.c

原创 kafka性能测试案例 —— 筑梦之路

以写入100w条MQ消息为例，每秒平均向kafka写入了4.77MB的数据，平均4999.725条消息/秒，每次写入的平均延迟为0.51毫秒，最大的延迟为481毫秒适当调大 batch.size和 linger.ms：这两个参数是配合起来使用的，目的就是缓存更多的数据，减少客户端发起请求的次数。这两个参数根据实际情况调整，注意要适量。关闭数据发送确认机制：适用于对数据完整性要求不高的场景，比如日志，丢几条无所谓那种。

原创 Shell脚本编程要点学习 —— 筑梦之路

掌握了这些shell要点，我就不信你还写不出好的脚本！

原创 Kubernetes 运维思考 —— 筑梦之路

比如，对于一个内存密集型的应用，如果资源请求设置为 512MB 内存，但实际运行时需要 1GB 内存，就可能出现内存不足导致的崩溃。通过深入理解其核心技术，掌握最佳实践，我们能够构建出高效、稳定、安全的容器化应用平台，为企业的数字化转型提供坚实的支撑。选择合适的监控工具，如 Prometheus、Grafana 等，采集 Kubernetes 集群和应用的各种指标，如资源使用情况、Pod 状态、服务性能等。利用动态存储供应机制，可以根据应用的需求自动创建和分配存储资源，提高存储管理的灵活性和效率。

原创 深化shell更好地编写shell脚本 —— 筑梦之路

掌握了这些shell要点，我就不信你还写不出好的脚本！

原创 K8S私有云裸金属服务器负载均衡器OpenELB——筑梦之路

OpenELB 是一个专为裸机 Kubernetes 集群设计的开源负载均衡器实现。在云服务环境中的 Kubernetes 集群里，通常可以用云服务提供商提供的负载均衡服务来暴露 Service，但是在本地没办法这样操作。而 OpenELB 可以让用户在裸金属服务器、边缘以及虚拟化环境中创建 LoadBalancer 类型的 Service 来暴露服务，并提供与云上的负载均衡器相同的用户体验。

原创 K8S pod资源清单 —— 筑梦之路

【代码】K8S pod资源清单 —— 筑梦之路。

原创 【云原生】ptcpdump捕获任何进程、容器或 Pod 的网络流量的抓包神器——筑梦之路

ptcpdump 是一个使用 eBPF 技术开发的、类 tcpdump 的网络抓包工具。它除了兼容 tcpdump 的常用命令行参数以及包过滤语法外， 还额外提供了如下核心特性：在输出中记录和显示发送网络流量的进程、容器、Pod 信息。支持对指定进程、容器以及 Pod 进行抓包。支持将抓取的数据包保存为 pcapng 格式，可以使用 tcpdump 或者 Wireshark 做进一步分析。

原创 【问题项目】freeswitch的web界面YouPBX —— 筑梦之路

说明：该项目是基于python 2.7+django开发。这里主要记录下搭建使用过程。

原创 Hadolint提升Dockerfile的质量和安全性 —— 筑梦之路

为了确保Dockerfiles的质量和安全性，将Hadolint集成到开发工作流程中是一个明智之举。这样可以在代码编写、提交前以及持续集成(CI)过程中自动检测潜在问题。hadolint 在线版本：https://hadolint.github.io/hadolint/如何你想忽略某些规则，在项目目录下创建hadolint.yaml文件，并指定要忽略的规则。运行Hadolint时指定配置文件。

原创 端口敲门方式加固SSH服务 —— 筑梦之路

管理员设定一组特定的端口序列，例如，访问端口1111、2222和3333，顺序和时间间隔都非常重要。

原创 大数据运维学习笔记之hadoop跨集群数据迁移应用实战——筑梦之路

大数据运维学习笔记之Hadoop跨集群数据迁移、学习方法

原创 CentOS 7.9 arm64架构配置在线yum源 —— 筑梦之路

【代码】CentOS 7.9 arm64架构配置在线yum源 —— 筑梦之路。

原创 龙蜥Anolis OS基于开源项目制作openssh 9.8p1 rpm包 —— 筑梦之路

制作过程和centos 7几乎没有区别，此处就不再赘述。

原创 比curl更直观的网站性能测试工具httpstat——筑梦之路

DNS解析耗时、TCP建联耗时、TCL握手耗时、服务端处理耗时、内容传递以及整体耗时。

原创 arm64架构下源码编译安装kafka —— 筑梦之路

一般来说，直接使用官方提供的二进制文件即可，没有必要使用源码编译安装的方式，而对于有特殊用途的，选择源码编译安装无疑是更好地选择。比如修改源码实现想要的功能，mirrormaker2保持topic名称不变。● 如果你对 Kafka 进行了自定义修改，确保这些修改不会破坏 Kafka 的核心功能。● 确保在编译和运行 Kafka 时使用与你的 Kafka 版本兼容的 Java 版本。● Kafka 的配置非常灵活，你可以根据需要调整 config/ 目录下的配置文件。

原创 提升脚本质量工具ShellCheck —— 筑梦之路

跨 shell 类型支持：虽然 ShellCheck 主要针对 Bash 脚本，但它也支持其他 shell 类型，能够根据用户指定的 shell 类型进行分析。最佳实践：ShellCheck 会根据 shell 脚本的最佳实践提供改进建议，比如使用更现代的语法特性、避免使用已经废弃的命令等。易于集成：ShellCheck 可以作为命令行工具使用，也可以集成到其他工具中，如 CI/CD 流程、编辑器插件等。安全检查：它可以检测潜在的安全问题，例如使用不安全的变量、潜在的注入漏洞等。

原创 开源项目编译harbor arm架构的包 —— 筑梦之路

先做个记录，空了再验证。

原创 DuckDB数据库初识 —— 筑梦之路

https://www.51cto.com/article/786010.html

原创 大数据运维学习笔记之大数据平台硬件规划、网络调优、架构设计、节点规划——筑梦之路

大数据平台资源规划

原创 大数据运维学习笔记之hadoop平台常见故障汇总和操作系统性能调优——筑梦之路

hadoop常见故障和性能调优

原创 linux环境下echo命令简单测试端口是否连通——筑梦之路

当命令执行后，若端口是开放的，命令不会有任何输出并且会立即返回命令提示符；若端口未开放或连接失败，则可能由于网络问题、防火墙限制等原因导致命令执行失败，通常会显示错误信息，比如“Permission denied”、“Connection refused”或“Network is unreachable”。需要注意的是，这种方法只适用于那些支持此特性的Bash环境，不具有普遍性，而且它并不会像专门的网络工具（如。）那样提供详细的连接状态信息。

原创 nginx七层和四层负载均衡 —— 筑梦之路

一文彻底理解Nginx的七层和四层负载均衡

原创 K8s驱逐场景以及规避方案参考 —— 筑梦之路

应用在申请或控制资源时，前置准入控制，查看当然 request 值水位，控制到安全水位，资源不足时，扩充 Node 后，才允许申请扩容。主动驱逐，受限于 PDB，如果配置了 PDB，会防止应用出现全部不可用的状况，但是直接 操作 DELETE Pod ，不受 PDB 限制，所以 drain 比 直接 DELETE 会安全一些，当做节点维护时。节点打污点（NoExecute），导致 Pod 被驱逐，或者移除亲和性标签，导致 Pod 被驱逐， Controller Manager 发起的驱逐。

原创 mysqlbinlog命令 —— 筑梦之路

MySQL的二进制日志binlog可以说是MySQL最重要的日志，它记录了所有的DDL和DML语句（除了数据查询语句select）,以事件形式记录，还包含语句所执行的消耗的时间，MySQL的二进制日志是事务安全型的。----Data Definition Language 数据库定义语言主要的命令有create、alter、drop等，ddl主要是用在定义或改变表(table)的结构,数据类型，表之间的连接和约束等初始工作上，他们大多在建表时候使用。

原创 Calicoctl工具学习 —— 筑梦之路

官方文档：https://docs.projectcalico.org/getting-started/clis/calicoctl/configure/文件的，所以需要为其提供 kubeconfig 配置文件，当其作为 kubectl 的插件运行时，系统会默认读取 kubectl 的配置文件。calico 的配置文件默认在 /etc/calico目录下，需要手动创建。calicoctl 使用来专门操作。是用来管理 calico 自己引入的。中与自己状态相关的数据的命令行工具。calicoctl 与。

原创 hadoop集群常用命令搜集——筑梦之路

【代码】hadoop集群常用命令搜集——筑梦之路。

原创 比Elasticsearch更高效的开源搜索引擎Meilisearch——筑梦之路

例如，在官方提供的基准测试中，使用 Meilisearch 处理 10 万个文档时，平均搜索时间为 1.47 毫秒，而使用 Elasticsearch 搜索同样的数据集时，平均搜索时间为 44.1 毫秒。Meilisearch 的安装和设置过程非常简单，并且它提供了易于使用的 Web 界面和 CLI 工具，使用户可以轻松管理和监控搜索引擎。Meilisearch 的搜索和索引都是高度可定制的，包括自定义排名、字段权重和搜索范围等功能。支持多种设置和搜索参数，可适应不同的业务场景。

原创 CentOS 6.5配置国内在线yum源和制作openssh 9.8p1 rpm包 —— 筑梦之路

CentOS 6.5比较古老的版本了，而还是有一些古老的项目仍然在使用。

原创 大数据运维学习笔记之Yarn\HDFS\kafka内存调优策略和性能瓶颈——筑梦之路

大数据运维学习笔记之Yarn\HDFS\kafka内存调优策略和性能瓶颈

原创 当前国内可用的docker加速器搜集 —— 筑梦之路

docker可用加速器

原创 大数据运维学习笔记之HDFS存储权限ACL控制策略、系统权限整合应用——筑梦之路

大数据运维学习笔记hdfs权限控制策略ACL

原创 CentOS 7 arm64架构制作openssl 1.1.1w 二进制rpm包——筑梦之路

本次制作主要修改了spec文件，将openssl安装路径修改为/usr/local/openssl。无差别，因此不再赘述。

原创 Rocky Linux 9.4基于官方源码制作openssh 9.8p1二进制rpm包 —— 筑梦之路

2024年7月1日，openssh 9.8版本发布，主要修复了CVE-2024-6387安全漏洞。由于centos 7的生命周期在6月30日终止，因此需要逐步替换到Rocky Linux，后续会有更多分享关于Rocky Linux的文章。

原创 CentOS 7基于开源项目制作openssh9.8p1 rpm二进制包修复安全漏洞CVE-2024-6387 —— 筑梦之路

CVE-2024-6387安全漏洞修复

原创 大数据运维学习笔记之yarn资源调度fair schedule与capacityschedule选型 —— 筑梦之路