自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

运维Linux和python

运维,主要使用的就是linux和python,分享及个人心得。

  • 博客(277)
  • 收藏
  • 关注

原创 运维大规模K8S集群注意事项

序言闲来无事,一片混沌,想不清思不断,改变好像来自于各个方面,有的时候是内部的冲突,有的时候是外部的竞争,然而,大部分情况下,一旦错过,就已经没得选了。尴尬的处境,需要有强大的抗压能力,可能是环境带来的,可能是别人带来的,而大部分情况下,都是自己带来的。运维大规模K8S集群的注意事项1pod无法启动有几个组件的pod,有的是deployment,有的是cronj...

2024-08-16 23:18:15 1308

原创 如何在kubernetes中抓包

序言 随着云原生的落地,k8s使用的人也越来越多了,而在这种环境中,抓包有的时候也是一种纠结的事情。爱意随风起,风止意难平,能不能抓到那个异常的包,有的时候靠的也是运气。在k8s环境中抓包 1 背景云使用的越多,那么就会碰到各种各样的版本,低版本一般使用的是dockerd,而高版本慢慢的在抛弃dockerd,逐渐在使用containerd,其实dockerd调用的时候,也是...

2024-08-03 01:06:03 419

原创 聊聊伪SRE

序言 剑就是剑,木剑铁剑并没有什么差别,如果提出的问题本身就有问题,那么答案又有什么意义呢?时光荏苒,还没过多久,各种高级词汇就逐渐的淡出视野,现在已经没人说碎片化时间了,因为大家都有在忙的时间,无数的短视频已经充斥了所有的时间。伪SRE 曾几可时,SRE的概念开始风靡,每个团队都自称为SRE,扛着一个名号,就感觉自己认为很高档很高级,但是实际上,名称虽然改变了,但是手头上的事还是...

2024-07-13 00:42:29 320

原创 从nginx返回404来看http1.0和http1.1的区别

序言 什么样的人可以称之为有智慧的人呢?如果下一个定义,你会如何来定义?所谓智慧,就是能区分自己能改变的部分,自己无法改变的部分,努力去做自己能改变的,而不要天天想着那些无法改变的东西,不然的话,就只能越来越消极了,消极的原因大部分也在于总是关注于自己无法改变的现实。nginx返回404问题排查 背景:大部分的人在看到nginx返回404的时候,要么就是请求了一个不存在...

2024-07-06 08:56:27 1051

原创 访问ingress nginx出现400报错

序言 在k8s中,使用的比较多就是ingress nginx了,如果你不仔细看一些配置信息,那么就会出现一些意想不到的报错。 背景:当把nginx里面的服务迁移到ingress nginx之后,访问出现了400报错,如果是你,你会怎么来排查?400报错排查 1 收到问题当迁移完成之后,就有人报障说,访问全部出现出现400 bad request,第一时间看到这个状态码,那...

2024-06-29 02:23:54 846

原创 nginx服务器连接数告警

序言 只要系统之间有交互,那么就会有连接数,连接数的告警阈值一般设置个几万,当连接数开始告警之后,怎么来排查呢?连接数过多,会消耗cpu,内存,文件句柄等资源,其实也还好,当解决不了的时候,你可以把连接数的阈值调高一点,或许10w才开始告警,或者30w才开始告警也行,只要cpu和内存不告警,其实也没那么紧急。服务端连接数异常告警排查 1 查看连接状态当nginx充当转发...

2024-06-22 01:02:50 819

原创 通过nginx转发后应用偶发502bad gateway

序言学习了一些东西,如何才是真正自己能用的呢?好像就是看自己的潜意识的反应,例如解决了一个问题,那么下次再碰到类似的问题,能直接下意识的去找到对应的信息,从而解决,而不是和第一次碰到一样,从头开始查一遍,如果是,那么这个问题对于你来说,可能依旧是一个新的问题。背景:把一个应用从一个代理迁移到nginx的时候,发现应用偶尔会出现502的响应,导致收到告警,而在原来中,是没有502的,...

2024-06-16 00:44:00 787

原创 如何评估是否要学一门新技术

序言新技术层出不穷,花无重开日,人无再少年,那么我们如何评估是否要学一门新技术呢。AI比人更会选择。思考的角度一般是:学习新技术的复杂度,新技术的应用,评估新技术的收益,进入的时间,投资回报率。风言风语1 焦虑的来源新技术的问世,总是会有各种各样的卜道师在那里宣传,有的是谣言,有的是真实发生的,AI的诞生,已经很难分清真假了。宣传的时候好好的,但是如果一旦应用了,就...

2024-02-25 18:35:03 939

原创 谦虚与抱怨

序言 年底了,好像也没见闲下来,最近做梦比较多,想出售一些梦想,三元一个,接受砍价。谦虚是一种品质,大部分人认为是一种美德,但是实际上也不会有人记得你的这种好;抱怨毫无价值,但是很多人就是喜欢抱怨。风言风语 1 谦虚分时间,不要一直谦虚谦虚最近年底了,有个朋友开始在做绩效考核了,先是自我评价然后再是上级评价,朋友想了想,好像没做出啥成绩,虽然过程很努力,很辛苦,做了很多事,...

2024-01-17 23:55:49 416

原创 直播的尽头是带货?

序言 小作文一般都比较精彩,无论是怎么表演,其实都是利益的较量,蛮好玩的。年底了,如果你的绩效比较差,估计就要被开除了,如果你的绩效太好,就容易被人惦记上,保不准就有个背刺要来了。有人的地方就有矛盾,而你是否敢把你的后背交给你的小伙伴呢?风言风语 每个人都想做直播,树立自己独特的人格魅力之后,就开启了超级IP之旅,直播的尽头是带货。想想现在科技这么发达,为什么还需要靠人带货...

2023-12-18 00:07:59 128

原创 为什么读了那么多书,还是过不好这一生?

序言 年底了,又要开始进行绩效考核了,这一年又浑浑噩噩的过去了,那么你收获了什么,又失去了什么?失去了岁月?收获了皱纹?对自己这一年的评价如何?风言风语 为什么你那么努力,为什么读了那么多的文章,依旧过不好这一生,依旧很多事情无法达到一个满意的结局呢?这是一个有趣的话题。先说结论:即使很努力的经历了很多事,即使读了很多文章,即使看了很多书,如果这些所有的行为或者...

2023-12-09 22:14:32 104

原创 阿阿阿里云崩了

序 今日突发消息,阿里云崩了,受影响的产品很多,经过了一轮重启之后,然后基本恢复了。故障应急第一刀,先杀意中人,重启之后就啥都不用记忆了。风言风语 双十一刚刚过去的日子,就经历这种大规模的故障,其实还是比较残酷的,昨夜,估计很多的核心骨干人员都在通宵,而在今天这个时间点出现故障,估计大部分的人都可能还在睡梦中,该联系的能联系的或者都联系不上,运维人员多与少,是否冗余,可能和这个...

2023-11-12 22:51:05 143

原创 戏说流程制度

序 想成功,先弄几个流程制度,这也算是发疯的一种。。。想成功,先发疯。孤注一掷里面的标准化流程来一套,也是集合了各种人的经验,就和有些地方所谓的SOP流程一样,先来一套SOP,然后再继续。风言风语 秋风吹,忽然想起原来忽悠别人做各种流程。当一个企业有一定的规模之后,就会有各种流程了,为啥呢?原因有二:第一个是因为对于管理层来说,劳资定的规矩就是规矩,制定流程是为了便于管...

2023-10-21 22:48:29 110

原创 随笔一二三

序 闲来无事,聊聊最近的小想法,八百个心眼子都在转圈圈。前几天看别人钓鱼,一会一条好几斤的大鲢鱼,比较重也比较大,钓起来后都用一条绳子串起来,然后拴着放在水里面;一个小时后,又上了一条8斤的鱼,但是找不到栓鱼的绳子了,没栓紧,导致所有的鱼都跑路了。如果是你,你是觉得钓到了鱼,然后鱼跑了好,还是说。。。一直就没钓到鱼比较好呢?风言风语 一件事,能不能做成,和你的关系到底大不大,和...

2023-10-07 23:26:41 85

原创 项目管理之高效合作

序 一件事能不能做成,和你有什么关系?靠的是你的努力吗?还是说靠的只是一个运气?就像买彩票一样,你觉得中奖和个人努力有没有关系;就像和高考一样,你觉得考上北大清华和个人努力有没有关系?项目管理之管人 有个朋友说,如果想做成一件事,不得罪人是不可能的,每个人如果都想做好人,那这件事就不用做了。项目管理的目标是什么?是按时按质按量的交付产品,在限定的资源限定的成本限定的时间...

2023-10-01 13:11:01 97

原创 项目管理之低效合作

序 一叶知秋,一片叶子的落下是风的诱惑,还是树的不挽留?其实可能是叶子想起来了自由。因为没有,所以我们经常提到,为什么我们经常强调项目管理的时候需要高效协同工作,因为处处充满着低效,今天我们聊聊如何低效工作。项目关键人之间的交互 人总是因为一些事而走到了一起,只因为在人群中看了你一眼,卧槽,我眼睛瞎了。。。项目关键人之开发者角色,项目正式启动之后,就要看开发者的能力了,...

2023-09-30 09:55:35 86

原创 2022年度废物报告

序言 怎么去形容2022呢?就像废了好大力气抓住了一条鱼,后来鱼游走了,剩下一股子腥味,却怎么洗也洗不掉了。还好。。。只是一个废物。冬天--在玩一种很新奇的东西 这个冬天不太冷,简直有点热,温度直逼四十度,羊了个羊。最难沟通的不是没有文化的人,而是被灌输了标准答案的人,我看人贼准。。。有的时候能跳过一些坑,你说是运气呢还是努力?最近在更换ssl证书的时候,替换了...

2022-12-31 00:39:38 712 2

原创 聊聊技术专家谈阿里云史诗级故障

序言 什么是技术专家,其实也是很懂,是做的时间足够长呢,还是说经历的厂比较多,还是说纸上谈兵比较牛逼?专家嘛,大家都懂的。。。只会弹别人,喔。。。是谈别人,原来不是弹,有本事技术专家谈谈自己呗。风言风语 阿里云出现史诗级故障,处理的时间足够长,然后各个技术专家就给出了很多建议:例如建议做什么status page来降低沟通成本,原因是其他的云厂商都有。。。从技术上来看,...

2022-12-25 11:17:31 1241

原创 敏捷运维

序言 表面上都是自由的,实际上四周围墙,无法跨越;表面上都有很多选择,实际上没得选。 成功是一种考验,失败也是,原因能想出来吗? 敏捷运维,敏捷开发,在各种压力进行运维,有一定的适合场景,你知道么?风言风语 运维到底根据什么样的节奏走?是快一点好还是慢一点好,效率优先?……是稳一点好还是直接上比较好,稳定优先?……是有规划好还是出问题再说,质...

2022-03-26 22:37:13 688

原创 从一个小问题探讨解题思路

序言前奏一响,心一动,就是跑路的信号,从入门到删库。。。你看这篇文章,她像不像一封辞职信。运维的终点在哪儿?如果运维的终点是没有运维,那么这一切又将有什么存在的含义?风言风...

2022-03-18 23:30:00 1615

原创 平淡让你无脑?

序言我的意中人,一定会驾着五彩祥云来打死我。。。平凡之间的平淡。空花幻月,都是用来迷惑众生的。。。听我讲道理,比死还难受。风言风语 最近都在升级,产品种类繁多,但是从...

2022-03-17 00:26:54 198

原创 新春内卷

序言许久未见风来,许久未见风起,本来是准备每个月更新一个篇章,然后弄一个专题序列玩玩的,奈何今年考核的KPI的是故障数,我要干100个故障。。。没有故障,创造故障也要上,也...

2022-01-16 23:30:00 862

原创

序言人生有很多执念,不过总会有人帮你轻描淡写的实现,有的人靠岁月,有的人靠时间,有的人靠母猪上树。。。人生第一个老婆最难,有了第一个,你会发现第二个,第三个都好简单。。。并...

2021-10-06 23:30:00 224

原创 七夕-我与故障有个约会

序言 专业的人做专业的事,但是做事的人一般都被开除了。。。放弃很可惜,但是坚持就一定有意义了?风言风语前言:你没有责任,那你为什么要处理故障。。。处理了故障,...

2021-08-14 19:38:13 326 1

原创 八月闲聊

序言远方就是窗外的风景,可望而不可及,在家呆的太久,都忘记了今夕是何年。如果你来南京玩,记得带好你的绿码。。。风言风语1 尊重你的用户,也尊重你自己可以吵架...

2021-08-08 00:10:37 229

原创 七月闲聊

序言 风都停了,所以闲下来瞎聊聊。。。最近头有点痒,可能是要长脑子了。。。风言风语 1 开源与商业看最近的天气,总是不太安稳,一会儿暴风雨,一会儿插喉咙,多事之...

2021-07-24 23:59:00 222 1

原创 三月闲聊

序言生活原本很沉闷,但跑起来有风。工欲善其事必先利其器,当你有一些想法的时候,如果没有合适的工具,那将是一个很痛苦的过程。。。至于有多痛苦呢,越追求细节的越enjoy。。。...

2021-03-15 22:24:19 335 1

原创 hdfs和yarn高可用对比

序言总有一天你会笑着说出曾经令你痛苦的事情,毕竟有些东西虽然不是你想要的,但是却是你自找的,表面上是无奈,实际上是懒得去做选择,成功的路只有一条,而失败的路则是各种各样的原因。...

2021-03-05 23:50:00 619

原创 hadoop几个问题

序言海量的数据无论是存储还是计算,总是要保证其架构的高可用,数据仓库的构建是一个合的过程,而微服务又是一个分的过程,天下大势,分分合合。不同的场景适合于不同的技术,不要在一...

2021-03-03 23:45:00 1442 1

原创 hadoop生态之sqoop

序言 在使用大数据的时候,各种不同的数据都要将数据采集同步到数据仓库中,一个是属于业务系统的RDBMS系统,也就是各种关系型数据库,一个是hadoop生态的存储,中间用于传输的数据的...

2021-02-28 23:30:00 585

原创 hive之编译源码

序言使用maven来进行源码,真的是靠运气,特别是你网络很差的情况下,再特别是你没有本地库的时候,靠运气吃饭。。。本来不想编译的,奈何在hive中执行show create...

2021-02-24 23:30:00 878

原创 hive初始化元数据库乱码

序言无论是使用何种语言进行编程,碰到的第一个问题莫过于乱码的问题,而使用数据库的时候,也大致差不多。 hive使用元数据库来记录相关hdfs数据文件和数据库表之间的映射关系,...

2021-02-21 23:56:00 694

原创 hadoop生态之hive

序言大数据的生态包含各种各样的组件,hive是其中之一,hive主要是作为数据仓库的工具,简化相关人员的代码工作,只要编写简单的SQL就可以实现mapreduce效果。...

2021-02-18 22:19:44 739

原创 hadoop之yarn调度

序言 在大数据的生态中,hdfs解决了海量数据的存储问题,mapreduce解决了海量数据的计算问题,而在任务的执行和资源统一管理层面,则是使用yarn进行统一调度。 yar...

2021-02-14 23:52:03 492 1

原创 hadoop之hdfs

序言 随着时间的推移,海量的数据都被积累起来,人人都是数据的产生者,产生各种各样的结构化数据,半结构化数据,非结构化数据,原来的关系型数据库搭建的数仓已经不能满足需求了,从而可以使用...

2021-02-09 22:03:03 456 1

原创 2020之年终决算

序言今天是2020年的最后一天了,其实大部分人基本上没啥感觉,毕竟现在过年过节也不是一个稀罕物了,不过,年终决算不会迟到也不会早退,就在今天。年终决算是指对今年的业务情况...

2020-12-31 19:34:17 709 6

原创 闲聊晋升

序言又到四季之末,有的人喜,有的人愁,有的是晋升,有的人是净身。都是公司恩怨,不要不专业。。。在很多的地方需要抹灭人性的光辉,毕竟。。。一群无情无义的人为了数字游戏聚集到...

2020-12-27 22:31:48 464

原创 解决方案之售前

序言又到年底了,HR部门又要开始干活了,弄一点所谓的游戏,弄一点所谓的PIP,弄一点所谓的绩效考核,该走人的走人,该优化的优化,该降级的降级,这就是所谓的人才资源盘点。售...

2020-12-26 20:02:26 1714 4

原创 云原生SRE

序言年底了,没有分手的朋友的赶紧分了,所谓新年新气象,年年不重样。去留无意,望看风卷残云。。。运维不会消失,但是会转移。风言风语1 云原生是什么? 最近云...

2020-12-18 20:58:15 1652 5

原创 架构的演进

序言小孩子最好的地方在于,无论你对他怎么样,他一直对你还是怎么样,前一秒在哭,下一秒就会笑容满面,而成年人不同,别人的一句话,可能就是一把刀插进心脏,久久不能恢复。小孩子...

2020-11-28 20:23:49 380

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除