自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(55)
  • 收藏
  • 关注

原创 开发个人Ollama-Chat--8 网站部署

平替aliyun的收费服务,白嫖白嫖白嫖, 以下功能全部白嫖。这次项目的前端服务。则完全托管到。是Cloudflare提供的一个静态网站托管服务,它允许开发者构建和部署现代化、高性能的网站。以下是。

2024-07-10 17:12:17 910

原创 开发个人Ollama-Chat--5 模型管理 (一)

开发一个chatGPT的网站,后端服务如何实现与大模型的对话?是整个项目中开发困难较大的点。

2024-07-05 15:58:26 1204

原创 ai绘画comfyUI专栏介绍

随着人工智能技术的飞速发展,AI绘画已成为艺术创作和设计领域的新宠。ComfyUI,作为一种新兴的设计语言,以其简洁、直观和用户友好的特性,正在逐渐成为UI设计的热门选择。本文将介绍如何搭建AI绘画ComfyUI工作流,探索AI绘画技术领域的前沿技术,并提供ComfyUI常用模型的资源链接。欢迎大家关注ComfyUI技术专栏,期待与大家一起探讨AI绘画领域的前沿技术。

2024-08-29 10:28:48 468

原创 从零开始搭建Aliyun ESC高可用集群 (HaVip+KeepAlived)

本设计方案采用两台阿里云ECS服务器搭建Keepalived结合LVS的高可用集群。使用LVS的TUN模式进行负载均衡,同时利用阿里云的弹性IP(EIP)实现跨服务器的高可用性。架构中,一台ECS服务器作为主LVS Director节点,另一台作为备份LVS Director节点,两者通过Keepalived实现故障自动切换。

2024-08-24 12:44:21 800

原创 从零开始搭建 LVS 高可用集群 (单机)

经过前面2篇关于lvs集群部署文章,相信跟着部署文档,实际部署过集群的大家对lvs服务有了深刻的了解。问题是:“无法在Aliyun上部署高可用集群, 那我前面学的知识点就没用了?其实 lvs 在kubernetes集群中的使用也比较广泛。k8s 资源service实际上就是实现了一个 lvs 路由配置。现在的构想就是: 我不想在单个ECS实例上部署Kubernetes单节点,又想实现 lvs 部署Nginx集群?这篇文章就是关于如何在单个ESC实例上部署Nginx集群。

2024-08-23 15:28:30 846

原创 从零开始搭建 Keepalaived+Lvs 高可用集群 (Aliyun部署)

本设计方案采用四台服务器构建高可用集群,使用 `Keepalived` 结合 `Linux Virtual Server (LVS)` 实现 **负载均衡** 和 **高可用性**。其中,两台服务器配置为`LVS`的`Director`服务器,用于处理客户端请求并分发到后端服务器。另外两台服务器作为`LVS`的`Real Server`,提供实际的服务处理。`Keepalived`用于实现`Director`服务器的**高可用性**。

2024-08-22 09:00:00 734 1

原创 从零开始搭建 LVS 高性能集群 (DR模式)

本设计方案采用三台服务器构建集群,使用(LVS) 作为负载均衡器,运行在直接路由 (DR)模式下。集群中的每一台服务器都将运行相同的服务,以实现和。LVS将作为前端节点,接收所有进入的请求,并将它们分发到后端服务器。

2024-08-16 17:26:01 682

原创 从零开始搭建 EMQX 集群压测框架

在设计以EMQX为中心的MQTT消息队列集群压力测试框架时,我们采用微服务架构模式。EMQX作为消息队列的核心,负责处理MQTT协议的消息发布和订阅。Nginx作为EMQX的反向代理,负责负载均衡和SSL/TLS终端。MQTTX-CLI作为压力测试工具,模拟大量客户端连接和消息交换。

2024-08-13 11:35:44 945

原创 nginx-emqx 负载不均衡排查过程

8core cpu的服务器上运行nginx, 自动绑定了8core, 对nginx进行的压力测试,发现 8core的连接数负载不均衡,例如: 1,3,5,8 的负载数分别达到了2w的连接数,其他core的负载数仅有300个连接数,什么原因导致的?如何进行修复?

2024-08-12 17:21:03 358

原创 从零开始搭建监控系统 (三) 指标采集

Prometheus Exporter 是一种代理服务,用于从各种应用程序、服务或硬件指标中抓取数据,并将其转换为 Prometheus 能够理解的格式。它能够暴露一个 HTTP 端点供 Prometheus 抓取,支持多种类型的数据源,如数据库、操作系统、网络设备等。使用场景包括监控应用程序性能、系统资源使用情况、网络流量等,以便进行数据分析和可视化。

2024-08-09 11:19:06 791

原创 从零开始搭建监控系统 (二) 部署

使用Docker Compose管理和部署Prometheus和Grafana,可以确保环境一致性,简化配置和部署流程,实现服务快速启动与停止,便于服务扩展和管理,同时支持自动化和多环境部署,提高开发和运维效率。

2024-08-07 15:58:31 390

原创 从零开始搭建监控系统 (一) 项目介绍

构建一套以 Prometheus 为中心的监控告警系统,其核心是 Prometheus 服务器,负责收集和存储指标数据。Grafana 作为数据展示和告警配置的前端界面。系统还包括 Exporters,它们是 Prometheus 的数据采集客户端,部署在各个服务上,用于收集服务的监控数据。

2024-08-07 14:53:46 371

原创 搭建链路追踪系统 Jaeger

为中心的链路追踪系统时,我们采用微服务架构模式。各服务功能流程概述流程包括:部署策略使用 部署 及相关服务。利用 定义服务,实现一键部署和管理。 镜像包括 的 镜像和 镜像。 文件配置服务间的网络和端口映射。Jaeger-uikibana-index使用 和 的包括:然而,也存在一些:综上所述,以 为中心,结合 存储的链路追踪系统,提供了一套完整的追踪解决方案,适用于需要高性能和可扩展性的分布式系统。通过 部署,我们能够实现快速、灵活的系统搭建和管理。

2024-08-02 15:46:20 1059

原创 搭建日志系统ELK(二)

在搭建以`ELK`为核心的日志系统时,`Logstash`作为日志采集的核心组件,负责将各个服务的日志数据采集、清洗、过滤。然而缺点也很明显:- 占用较多的服务器资源。- 配置复杂,学习曲线陡峭。- 处理大数据量时性能下降。在我们设计架构时,尽量会选择减少主机使用资源,轻量,高性能,又能满足日志采集的需求。有没有这么一个开源服务呢?答案便是`go-stash`。

2024-08-01 17:46:10 852

原创 搭建日志系统ELK(一)

作为数据收集和处理的中间件,它支持多种数据源和灵活的数据处理插件,能够将非结构化日志数据转换为结构化格式,便于存储和查询。的搜索引擎,提供快速的全文搜索能力,适合处理大规模数据集,并且具备高可扩展性。容器化还确保了环境的一致性,减少了"在我的机器上可以运行"的问题。的日志系统,为企业提供了一个强大、灵活且易于管理的日志解决方案。来实现,它不仅存储日志数据,还提供强大的搜索和分析能力。:每个服务运行在独立的容器中,减少了服务间的相互影响。完成,它将复杂的日志数据转换为直观的图表和仪表板。

2024-08-01 15:52:51 509

原创 开发个人Ollama-Chat--10 绑定域名

`域名购买`最好找`正规`的渠道购买,不要因贪图小便宜而多走很多的`弯路`。我就是第一次购买域名,到了一个坑壁的平台"西部数码",`SSL`证书申请了2个月,没下来,客服也贼不专业,还不能退款,狗逼的平台,耽误网站上线的时间。

2024-07-14 20:03:05 394

原创 开发个人Ollama-Chat--9 Frp穿透

本地运行了一台服务器,专门跑大模型服务,使用nginx暴漏了 服务和端口。在aliyun上购买了一台低配 2 Cores, 2G 的服务器,能否通过 内网穿透 “frp” 服务,将本地服务器运行的服务暴漏到公网,方便其他人使用?

2024-07-12 13:31:54 442

原创 开发个人Ollama-Chat--6 OpenUI

Open WebUI 是一种可扩展、功能丰富且用户友好的自托管 WebUI,旨在完全离线运行。它支持各种 LLM 运行器,包括Ollama和OpenAI兼容的 API。

2024-07-09 17:36:30 543

原创 开发个人Ollama-Chat--7 服务部署

go-ChatGPT项目涉及的中间件服务较多,如何一键部署?并且配置正确,服务全部都正常运行?通过这篇项目手拉手带你部署。

2024-07-08 13:16:16 391

原创 开发个人Ollama-Chat--5 模型管理 (二)

这是该项目的最终效果,使用ollama的open-webui进行人与机器的对话功能,对话的后端服务则完全对接自己开发的Go项目。如何实现呢?则通过这篇文章,一一给大家剖析后端的原理及功能实现。

2024-07-06 15:29:29 1250

原创 开发个人Ollama-Chat--4 用户管理

开发个人OpenUI--4 用户管理

2024-07-04 17:38:48 600

原创 开发个人Ollama-Chat--3 服务拆分

个人OpenUI项目可拆分用户服务(user),AI模型服务(AiModel),…每个服务都可以再分为api服务和rpc服务。api服务对外,可提供给app调用。rpc服务是对内的,可提供给内部api服务或者其他rpc服务调用。

2024-07-04 11:28:28 762

原创 开发个人Ollama-Chat--2 环境搭建

这里使用 `Docker Compose` 来编排管理我们的容器,`docker-compose.yaml

2024-07-02 13:51:37 378

原创 开发个人Ollama-Chat--1 项目介绍

本文将以一个使用Ollama部署的ChatGPT为背景,主要还是介绍和学习使用go-zero框架,开发个人OpenUI的服务器后端,使用Docker部署网站到公网,体验和了解微服务架构,发布微服务到网站的具体流程。

2024-07-01 18:04:33 597

原创 Mysql高级使用

深入了解mysql的数据与索引存储,golang调用

2023-03-10 17:36:26 488

原创 Redis进阶: 锁的使用

Redis进阶: 分布式锁

2022-04-11 19:19:32 3010

原创 Golang笔记: channel

Golang笔记: channelChannel定义channel 基本特性数据结构Chan使用创建chan向chan中写入数据从chan中读取数据Chan关闭sendq、recvq G释放释放接收方释放发送方协程调度channel send/recv 分析sendrecv细节参考博客Channel定义不要通过共享内存来通信,而是通过通信来实现内存共享多个 goroutine 借助 channel 来传输数据,实现了跨 goroutine 间的数据传输,多者独立运行,不需要强关联,更不影响对方的 g

2021-01-14 14:55:28 692

原创 《Kubernetes in action》Pod的调度策略

Pod的调度策略Pod的调度策略主要概念主机层pod层污点(taints)与容忍(tolerations)调度使用指定主机组独占主机亲和性默认部署案例Pod的调度策略主要概念主机层nodeSelector备注:如果nodeSelectorTerms下面有多个选项的话,满足任何一个条件就可以了;如果matchExpressions有多个选项的话,则必须同时满足这些条件才能正常调度 POD。如果我们的目标节点没有可用的资源,我们的 Pod 就会一直处于 Pending 状态pod层亲和性:

2020-12-18 14:14:31 1356

原创 《Kubernetes in action》探针

Kubernetes 探针保持Pod健康存活探针创建有效的存活探针就绪探针就绪探针的实际作用另类就绪探针(服务依赖)参考博客保持Pod健康存活探针存活探针: Kubemetes 可以通过存活探针 (liveness probe) 检查容器是否还在运行。 可以为 pod 中的每个容器单独指定存活探针。 如果探测失败, Kubenetes 将定期执行探针并重新启动容器。Kubemetes 有以下三种探测容器的机制:HTTPGET探针对容器的 IP 地址(你指定的端口和路径)执行 HTTP GET 请

2020-07-20 17:18:15 465

原创 《Kubernetes in action》 集群服务(二)

Kubernetes 集群服务使用 headless服务来发现独立的pod产生背景创建headless服务通过DNS发现pod发现所有的pod一包括未就绪的pod排除服务故障StatefulSet + headless service使用 headless服务来发现独立的pod产生背景如果客户端需要链接到所有的 pod 呢?如果后端的 pod 都需要连接到所有其他pod 呢?通过服务连接显然不是这样的, 那是怎样的呢?通常, 当执行服务的 DNS 查找时, DNS 服务器会返回单个 IP一服务的集群

2020-07-20 13:53:47 177

原创 《Kubernetes in action》集群服务(一)

Kubernetes 集群服务《Kubernetes in action》集群服务通过kubectl expose创建服务podExposeServiceResult《Kubernetes in action》集群服务Kubemetes 服务是一种为一组功能相同的 pod 提供单一不变的接入点的资源。当服务存在时,它的 IP 地址和端口不会改变。 客户端通过 IP 地址和端口号建立连接,这些连...

2020-06-19 09:05:15 361

原创 Prometheus: kubernetes gpu metrics monitoring

Kubernetes prometheus pod gpu metrics monitoringpod-gpu-monitoringPrerequisitesDeploy on Kubernetes clusterRelated documentpod-gpu-monitoringgpu metrics monitoring of podgpuhubPrerequisitesNVIDIA Tesla drivers = R384+ (download from NVIDIA Driver Do

2020-06-18 16:39:02 934 1

原创 《Kubernetes in action》Kubernetes API权限认证(二)

Kubernetes API权限认证 二 kubernetes 部署PrometheusNvidia gpu 指标提取Prometheus 监控Grafana 部署参考博客kubernetes 部署Prometheus上一篇主要将了RBAC的权限认证, 主要是理论知识。这一篇主要通过部署Prometheus监控nvidia gpu来更加了解RBAC在应用上的实践,相对还是比较简单的, 没有涉及告警等其他组件项目文件: prometheus-github文件结构[root@SHPL009049015

2020-05-18 21:44:31 443

原创 《Kubernetes in action》Kubernetes API权限认证(一)

Kubernetes API权限认证了解认证机制用户和组ServiceAccount介绍ServiceAccount 资源创建ServiceAccount将 ServiceAccount 分配给 pod通过基于角色的权限控制加强集群安全介绍RBAC授权插件介绍RBAC资源了解认证机制API 服务器接收到的请求会经过一个认证插件的列表,列表中的每个插件都可以检查这个请求和尝试确定谁在发送这个请求。列表中的第一个插件可以提取请求中客户端的用户名、用户 ID 和组信息,并返回给 API 服务器。 API服务器

2020-05-18 20:34:15 633 1

原创 《Kubernetes in action》Kubernetes 自动扩缩容HPA

Kubernetes 自动扩缩容Hpapod的横向自动伸缩了解自动伸缩过程基于CPU使用率进行自动伸缩metric-service搭建测试HPA部署基于内存使用进行自动伸缩本章小结pod的横向自动伸缩了解自动伸缩过程自动伸缩 的过程可以分为三个步骤:获取被伸缩资源对象所管理的所有pod度量。计算使度量数值到达(或接近)所指定目标数值所需的pod数量。更新被伸缩资源的replicas字段。获取pod度量Autoscaler本身并不负责采集pod度量数据 , 而是从另外的来源获取。 pod与

2020-05-18 13:50:30 469

原创 《Kubernetes in action》副本机制和其他控制器

Kubernetes资源类型

2020-04-12 17:26:40 289

原创 《Kubernetes in action》Pod基础

Kubernetes PodKubernetes Pod介绍Pod为何需要pod了解pod通过Pod合理管理容器检查现有 pod YAML/Json 描述文件向pod发送请求通过标签选择器列出pod子集介绍标签创建pod时指定标签修改现有pod的标签注解命名空间Kubernetes Pod介绍Pod为何需要podpod是一组并置的容器, 代表了Kubemetes中的基本构建模块。 在实际...

2020-04-04 22:05:17 446

原创 《Kubernetes in action》基础部分

Kubernetes引言1. Kubemetes 使开发者可以自主部署应用,并且控制部署的频率,完全脱离运维团队的帮助。ubemetes 同时能让运维团队监控整个系统,并且在硬件故障时重新调度应用 系统管理员的工作重 ,从监管应用转移到了监管 ubem tes ,以及剩余的系统资源,因为 ubemetes 会帮助监管所有的应用2. Kubemetes 抽象了数据中心的硬件基础设施,使得...

2020-03-22 17:16:39 323

原创 一图总结: MySQL

一图总结:MySQLxmindmysql.xmindsummarywhat集群事务索引

2020-03-21 17:11:29 145

原创 一图总结:RabbitMQ

RabbitMQ 是一款流行的开源消息代理和队列服务器,它提供了异步通信、解耦应用组件、扩展性以及可靠性。RabbitMQ 支持多种消息协议,如 AMQP、STOMP 等,并且能够处理多种类型的数据,包括文本、JSON 和二进制数据。

2019-11-20 13:43:15 174

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除