- 博客(97)
- 资源 (2)
- 收藏
- 关注
原创 老杨说运维 | 金融业数据中心的发展趋势
金融业的信息化建设,经历了从区域分散式机房 - 数据大集中 - 两地三中心多活 - 云化智能化等过程的发展。这中间经历了信息化建设技术架构、业务服务渠道、通信技术发展、信息化运行手段各阶段的变迁,未来的金融信息中心,将是:数据价值创造中心、先进科技创新中心、协同运营总控中心、绿色可持续发展中心、及智能自治共享中心。
2024-05-14 16:09:24
208
1
原创 深度解析 | PagerDuty Copilot - 运维领域大模型应用场景
PagerDuty Copilot所实现的高效、灵活、智能的运维辅助服务,是依赖于像ChatGPT-4这样的大模型的能力。这种大模型具有强大的学习和理解能力,可以处理大量的复杂信息,给出准确的反馈和建议。
2024-05-10 17:08:52
848
2
原创 技术流 | clickhouse如何加速merge
我们在使用clickhouse的过程中,往往会发现一个奇怪的现象:明明机器性能很强,如36core, 1TB内存,但是merge的时候资源却并不能充分利用。原因何在呢?
2024-04-23 16:56:06
730
1
原创 深度解析:ChatGPT在不同场景中的应用
大型语言模型在各种应用场景中都展现出了强大的能力。无论是信息提取、文本释义、内容生成、内容归纳总结,还是内容格式化、编程应用、翻译、自然语言处理、知识获取,甚至是图像生成(抽象的可以,带事实数据的欠佳),都能够有效地完成任务,提供高质量的结果。
2024-04-19 11:46:43
875
原创 智能运维场景 | 科技风险预警,能实现到什么程度?
风险预警场景主要面向业务系统,以风险管控为主要视角,通过风险指标、健康度风险模型、风险识别矩阵三大模块构建而成
2024-04-10 11:39:34
1054
原创 AIOps案例 | AI能替代人工进行告警分析吗?(二 告警产品化和分析结果报告)
本次项目的目标是对一头部券商客户的“核心业务系统”在过去6个月内产生的33.6万条历史告警数据进行关联分析。通过5轮迭代,我们最终得到了22条关联模式结果,并由数据科学家筛选出了13条有效结果
2024-03-21 15:19:06
538
原创 AIOps案例 | AI能替代人工进行告警分析吗?(一 告警模型的建立)
由于可观测性需求的深入及实施,带来了大量的告警需要进行处理,原有的统一事件管理平台仅完成了对告警的收集、告警标准化、丰富和通知等能力。当前客户面临的最大问题是:告警不能进一步收敛,缺乏运维专家的经验可以将同一问题引发的多个告警进行有效的关联,进而进一步降低告警的处理量。
2024-03-12 14:32:17
644
转载 AIOps实战 | 运维数智化转型的深入实践与探索
新一代全行运维一体化平台——“启明”,总体分为两个阶段建设,第一阶段:“建平台,夯实底座”,以一体化平台基础能力为核心建设内容,完成统一采控、数据治理、企业级CMDB、自动化等模块建设,并实现多云环境、信创环境适配,在场景侧优先建设统一监控、应急处置等重点应用。第二阶段:“搭场景,运营生态”,在第一阶段基础上,重点建设技术变更、灾备切换等场景,探索告警智能收敛、根因推荐等智能化应用。
2024-02-27 16:11:59
42
原创 技术流 | 使用eBPF增强kubernetes可观测性的实践分享
eBPF 是⼀个令⼈印象深刻的可观测性⼯具,与传统的可观测性解决⽅案相⽐,它可以提供更深⼊的洞察⼒。
2023-07-10 16:46:37
615
原创 智能运维的集中告警平台实战思路 —— 紧耦合还是宽融合?
作者:擎创科技产品总监 Daniel本文是节选,如感兴趣可留言一起探讨。( 我们在确定一个产品的思路和方向时,经常面临截然不同的选择。如同此文探讨的集中告警平台是否应跟集中监控平台紧绑定或松融合,具体的实战案例或许也提供一些方向。作为吃瓜群众,本博主从来支持各自发展、偶尔连接,做灵活性大的产品。且看银行客户怎么做的)
2023-05-12 16:55:48
780
原创 微信新功能,屏蔽掉一些“友情群”
又到了IT人忙碌不堪的第四季度。单子少,不开心;单子多,又忙得不得了。不过,总是希望生意越来越好,年末红包也可以大一点!为了集中注意力,最近设置了不少不提示信息的微信群。没想到微信更新后,又多了个“折叠聊天”的功能,可以把一些平时完全不想看,只有偶尔想起来时瞄一眼的那种,归到折叠聊天里。太好了,可以屏蔽一大批友情群...
2021-10-12 17:14:46
115
原创 ClickHouse逻辑集群的玩法
[本文作者:擎创 禹鼎侯。我们有时候叫他“大禹”,是个文理双全的攻城狮]什么是逻辑集群ClickHouse作为一个基于OLAP场景的数据库,对于集群的支持自然也是理所当然的。我们通常所说的ClickHouse集群,指的是物理集群。即集群各节点之间被同一个zookeeper集群管理,数据的各种DDL操作都是针对整个集群有效的。与物理集群相对应的,还有一类集群,我们叫它逻辑集群。它是指在物理上没有一定的必然关系的物理集群,彼此又组成了一个逻辑集群。可以用下面这幅图形象地表达物理集群和逻辑集群的关系。
2021-08-04 15:25:27
1003
原创 一篇融资稿引起的狂空滥炸般的推销
每次公司一说可以发融资稿了,真是又兴奋又烦恼。有资金意味着公司不仅得到客户的认可,也得到投资者的认可;但一发公开稿件,随之而来的各种推销电话,接之不尽。这次融资的媒体稿,是6/22(昨天)早上8:00由36氪和创业邦联合首发。刚发出去没多久,我的公司400电话转接手机的线就被挤爆了。一上午接了不下30通的推销电话,全是媒体公司来联系给我们发文的。佩服这些辛苦的业务人员,但真怀疑这样做的结果。态度好一点的来电,告诉他相关事项请发邮件,就互道感谢,互道再见态度一般的来电,非要转接品牌宣传部门。一般的公
2021-06-23 15:27:41
124
原创 #老杨说运维#演讲稿:循序渐进推动智能运维建设
2021年6月初,擎创科技CEO杨辰在北京双态用户大会上做了“循序渐进推动智能运维建设”的演讲。这里可以下载演讲的pdf:2021古北 循序渐进推动运维数字化和智能化
2021-06-16 16:26:49
259
原创 最好以用户视角设计产品菜单和分级
前两天去北京参加了一个央企、金融行业科技部门为主要受众的会。好久没去北京出差了,借此机会也去了司马台长城和圆明园。现在越来越方便,预订门票都是用手机来订和支付。可这两个景区的...
2021-06-08 17:50:23
167
原创 孩子跟父母,讲的是真话吗?
朋友推荐了一个实习生。刚大一,海外名校。面了一下,想想大一还比较嫩,要不干一些练练手的活儿吧。HR跟这个实习生约好了上班时间。提前2天的时候,对方说,学校里还有点事,希望推迟一天再来。没问题。正式来之前一天,HR再次联系他,却失联了。微信不回、手机不接。当时就觉得大概他是不想上班,只是碍于有推荐关系不好明说。没想到,一会儿他爸爸很高兴地感谢推荐人,说儿子去**实习了。非常感谢。弄得我们几个知道情况的人暴汗。敢情这同学,对父母说去上班了、实际不知道逃避在哪里。或许他其实真的还没准备好体验社会,更
2021-05-18 17:20:16
84
原创 总是被当下的眼界局限的想象力,比如视频网站、比如5G...
上周末去听了场有关数字化转型的演讲,原以为会高深无比,没想到演讲者深入浅出妙趣横生、又举了很多例子,原本感觉很遥远的议题让人产生了不少小体悟。老师说,中国那么多成功的企业家,他最觉得与众不同的就是华为任正非。大部分企业家是看到市场、看到需求,成就一番事业。任正非的眼光则非常长远,比如对于芯片的投入,十多年的埋头苦干,就为了看准未来有机会。这么长远的战略眼光,一般企业家不太有。回想了一下自己经过的这一个个风云变化的市场,虽然自己经常能在很早的时候就看对一些品牌,看对一些模式,但看走眼的时候也不少,也是
2021-04-20 17:53:48
200
原创 应届生的简历怎么写
不是HR,原本是对简历也说不上什么观感,更关注实际工作经历。不过最近刚好自己部门在招人,看了不少简历;又刚好家里有亲戚孩子研究生毕业叫我们帮忙看看有什么机会。那么多简历放在一起,对应届生的这份就生出很多“不满足”来。后来也给了这孩子一些一家之言的建议,不知道他们会不会参考,或者嫌我多事。简历简历,无非言简意赅。把我最能打动HR或筛选者的一面,最快速直接地呈现出来。那么问题来了:企业招聘官希望看到应届生的哪些信息?听说大厂,尤其在招计算机相关技术人员时,二话不说先考试。考知识、考算法、考智商...
2021-04-15 13:13:50
541
2
原创 技术分享:Flink源码分析-Task执行
本文作者:擎创科技 研发总监a coder在介绍JobMaster之前,先插播一篇分析从Task被提交到TaskExecutor后到运行的过程。所有的分布式计算引擎都有一个序列化任务然后提交给各Worker节点去执行的过程,我们在开始开发Flink作业或者Spark作业时,也经常会遇到一些序列化相关的异常,所有这些都牵扯到几个问题:Flink如何来描述我们开发的数据处理逻辑(绝大部分是user Function)。 Flink如何来序列化以及反序列化我们开发的数据处理逻辑。 Flink最终如何执
2021-04-09 11:04:24
690
转载 Flink源码分析-JobDispatcher
(本文作者 擎创科技研发总监 a coder)背景介绍最近一直在阅读Flink基于Yarn的资源管理相关的代码,牵扯的流程比较长,主要包含以下几个环节:客户端环节:命令参数解析,定位到作业入口,生成JobGraph,翻译成启动对应的Yarn集群描述符,开始提交到Yarn。 AppMaster环节:根据不同的作业模式(Session/Job),选择不同的启动入口,开始启动集群,这个阶段需要构造的重要组件包含:Dispatcher,Resource Manager,Job Master。具体每个组
2021-03-30 15:00:07
359
原创 #老杨说运维# 2021GOPS演讲实录(三)告警、指标、日志、智能运维场景
老杨的话#中翻中#:智能运维,是在数据中台的基础上,对告警、指标和日志数据进行分析处理,并通过智能运维场景来支持运营决策。20201127 GOPS上海_杨辰 03下一步,从数据到信息和知识。那信息和知识的层面,在擎创看来又有什么分别呢?首先我们来看信息。信息就是指对于运维数据的基本门类的粗加工或者说单元的加工能力。这里面又包括了4个门类。告警数据第一个门类是对运维数据中间最重要的一种能力,也就是告警数据。告警是我们运维人员之眼。也就是说运维想要看到问题,多半绝大多数是..
2021-02-24 17:14:11
322
擎创科技智能运维手册(202011版)
2020-12-08
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人