- 博客(2402)
- 资源 (7)
- 收藏
- 关注
RSS订阅
原创 一条看似不合理SQL和10个合理的解释
,这是学习笔记的第2172篇文章读完需要15分钟速读仅需5分钟有一天看到了一个开发同学提的问题，感觉蛮有意思，就稍花了些时间总结了下，问题描述如下：开发的时候碰到类似这么一个问题：m...
2019-12-09 19:33:43
531
原创 如何优化MySQL千万级大表，我写了6000字的解读
这是学习笔记的第2138篇文章千万级大表如何优化，这是一个很有技术含量的问题，通常我们的直觉思维都会跳转到拆分或者数据分区，在此我想做一些补充和梳理，想和大家做一些这方面的经验总结，也欢迎大家提出建议。从一开始脑海里开始也是火光四现，到不断的自我批评，后来也参考了一些团队的经验，我整理了下面的大纲内容。既然要吃透这个问题，我们势必要回到本源，我把这个...
2019-10-21 20:03:03
68475
48
原创 说说我的新书《MySQL DBA工作笔记》
这是学习笔记的第2066篇文章6年前的某一天，我开始坚持每天写一篇文章，写东西的习惯在大学期间就有，现在拿起以前的青葱文字依然感慨，也许这就是文字带给人的记忆吧。在DBA方向，我写了两本书，第一本是Oracle方向的，2016年出版，截止现在已经重印7次，销量超过20000册，第二本是MySQL方向的，是新写的一本，算是工作笔记系列的姊妹篇，今天想给大家说的是这一本。...
2019-10-12 12:15:09
3312
6
转载 招贤纳士-202309
简单收集了一波招聘信息，北京的职位相对集中一些，供参考。以下职位如需要，按照指定邮箱投递，也可以私信我来内推也可以，发我邮箱也可以：jeanrock@126.com360360 云平台基础架构部职位1：MongoDB运维工程师1. 负责 MongoDB、Redis、Pika 等系统的二次开发、运维及管理工作;2. 负责数据库资源规划，实现高可用、高性能、可扩展、安全的数据库运行架构;3. 负责...
2023-09-26 22:10:10
3
转载 Oracle CloudWorld 2023: Larry Ellison 主题演讲— Oracle 的未来愿景
美国当地时间2023年9月18日，一年一度的Oracle CloudWorld如期在美国拉斯维加斯举行，在这个AI迅速发展的时代，Oracle会以怎样的方式助力这场科技浪潮中的企业走向成功呢？在北京时间2023年9月20日6:00的Larry Ellison的主题演讲中为您带来答案。在正式为您介绍Larry的主题演讲之前，先请您和我一起来感受一下现场热烈的气氛。Larry 在观众欢呼声中闪亮登场，...
2023-09-20 22:29:29
15
转载 最近的一些杂感-20230913
这是学习笔记的第2474篇文章 盘点下最近的一些想法，欢迎大家拍砖。#买鱼的风波周末去花鸟鱼市场逛了逛，本来是想买几只小螃蟹的，我大概盘算了下需要买3只，可能还得买一个稍大一点儿的金鱼。到了花鸟市场，没找到合适的，碰到的个头都比较大，而且对比下来同样的小螃蟹市场的价格要高一些，于是在回家的路上就开始盘算在拼多多上面买，价格确实要便宜。正在琢磨的时候在路边碰到了两位老大爷在卖金鱼。里面有不少...
2023-09-13 08:32:19
25
转载 甩掉TCP协议的HTTP/3，真的很牛吗？
作者介绍李龙彦，网络技术专家，多年网络协议栈开发经验。分享概要一、HTTP/1.1简单介绍二、HTTP/2介绍三、HTTP/3介绍四、结语五、Q&A一、HTTP/1.1简单介绍与HTTP/1.0相比，HTTP/1.1主要有两个新的特性：keepalive和pipelining。Keepalive实现了连接复用的功能，从而达到了“长连接”的目的。长连接即是长期存活不关闭的连接，短连接是连接用...
2023-09-09 23:59:50
28
原创 玩数独是一场修行
这是学习笔记的第2473篇文章 以前以为数独是一种比较简单的游戏，没想到轻视了。在一个偶然的机会中接触了下，然后打算入手，目的有两个：1.锻炼自己的逻辑思维 2.和孩子一起练习，培养孩子的逻辑思维。我现在主要玩的是九宫数独，其实规则总体很简单，行列都是1-9共9个数字组合，每个宫也都是1-9共9个数字，不重不漏。刚开始上来就使蛮力，花费的时间也多一些，和孩子两个玩的时候相对快一些。选择简单...
2023-08-31 08:54:44
47
转载 故障解析 | 生产环境遇到 MySQL 数据页损坏问题如何解决？
作者：徐文梁爱可生 DBA 成员，一个执着于技术的数据库工程师，主要负责数据库日常运维工作。擅长 MySQL，Redis 及其他常见数据库也有涉猎；喜欢垂钓，看书，看风景，结交新朋友。本文来源：原创投稿* 爱可生开源社区出品，原创内容未经授权不得随意使用，转载请联系小编并注明来源。1问题背景四月份的时候，遇到一次实例异常 crash 的问题。当时数据库自动重启，未对生产造成影响，未做处理，但是还是...
2023-08-25 23:51:59
36
转载 看书就想睡？他却在书籍的世界中记录美
来自瑞士的 Thomas Guignard 是一名图书管理员，他现在服务于加拿大多伦多的一家图书馆。作为真正的阅读爱好者，每天都要与书籍打交道的他，喜欢拿相机去世界各地记录关于图书馆的一切。这些在传统印象中古板、乏味的建筑，也在Guignard 的镜头里，呈现出引人入胜的人文之美。此外，我也整理了一些我知道的美丽图书馆，都放在文后了，供参考。· 加拿大蒙特利尔档案馆· 加拿大律师协会大图书馆· ...
2023-08-24 18:39:50
34
原创 和孩子比赛画画
这是学习笔记的第2472篇文章 昨天晚上时间还早，孩子说我们来玩一个游戏吧，是比赛画画，两个人画同一幅画，看谁画得像。我说你来选图片，结果没一会儿孩子就选了下面这条蛇。原画：我的作品：我是按照整体轮廓来画的，显然没有受过专业训练，画的时候感觉还行，但是仔细和原图来比，重心有些偏，和原图还是有比较大的差距，尤其是染色，我还停留在小学阶段的蜡笔涂色，颜色的层次和深浅把握得也不够好。孩子的作品：孩子...
2023-08-22 08:21:06
46
转载 CMDB的建设，其实就是惺惺相惜！
CMDB的建设不能闭门造车，因此无论是从有心者的反馈，还是和运维小伙伴的交流，大叔都默默地进行了梳理。在此特将技术大佬、产品、开发、运维等多个视角关于CMDB的看法进行总结分享，希望能给大家在这炎热的季节解下暑。技术大佬视角在正式开启本文前，我们先来看下技术大佬们对CMDB的理解：从CMDB使用者角度来说，大佬们的看法可谓是一阵见血，因此CMDB的场景消费离不开大佬们在技术架构上的支持。如果CMD...
2023-08-20 22:15:23
32
转载 怎么用一句话证明你在公司的最底层？
本文转载来源于知乎，作者HR猫姐https://www.zhihu.com/question/617182570/answer/3166420147“他们都去开会了。”“走啊开会去啊”；”啊我也要去吗？““我不知道啊我没有权限。”“你稍等，我问一下。”“收到”“你们这废纸壳子还要不要了？！”；“稍等我去问一下”“哪个群啊？我不在群里啊”离职的时候——“啊你这工作也不用交接。”各大平台都可以找到...
2023-08-17 08:04:47
39
转载 故障解析 | MySQL 主从复制遇到 1590 报错
作者：王祥爱可生 DBA 团队成员，主要负责 MySQL 故障处理和性能优化。对技术执着，为客户负责。本文来源：原创投稿* 爱可生开源社区出品，原创内容未经授权不得随意使用，转载请联系小编并注明来源。1故障描述DMP[1] 收到告警：从库的 SQL 线程停止工作，MySQL 版本为 5.7.32，登录到从库查看复制信息报错如下：mysql>showslavestatus\G*****...
2023-08-15 23:05:41
38
转载 云厂商 RDS API 大起底
1. 云产品 API 概述云产品 API 是用于与云产品进行通信的编程接口，允许开发者编写代码来控制云资源。通过使用 API，开发者可以实现自动化和标准化的操作，从而提高效率和降低错误率。此外，云产品 API 还可以提供对云服务的扩展和集成，使开发者能够将云服务与自有其他应用系统集成，构建更加丰富和复杂的应用程序。通过使用 API，可以提高开发者的生产力和创新能力，帮助他们更快地开发和部署云应用，...
2023-08-10 23:43:33
39
转载 故障分析 | 如何通过 blktrace 排查磁盘异常？
作者：张昊DBA，主要负责 MySQL 故障处理、DMP 产品支持，擅长 MySQL。本文来源：原创投稿* 爱可生开源社区出品，原创内容未经授权不得随意使用，转载请联系小编并注明来源。1背景描述客户业务反馈经常出现运行效率低的情况希望我们从数据库进行排查，之前已经定位到是磁盘问题，但是当时没有继续深入排查。详细背景：技术分享 | 客户说 insert 慢，我该怎么办2日志分析2.1 慢日志分析发现...
2023-08-09 23:55:59
58
转载 分布式数据库是不同的
今天的话题有两层含义，第一层是说相对于我们所熟知的集中式数据库来说，分布式数据库是与之不同的。在做数据库选型的时候，我们要充分的了解其间的不同，才能做出较为科学的决策。我想很多数据库从业人员都了解其中的不同，不幸的是，他们不是数据库选型的决策者，大多数决策者并不了解这一点。关于分布式数据库与集中式数据库的不同，我上周已经发文讨论过了，今天我要讲的是另外一个问题，那就是不同的分布式数据库产品也是不同...
2023-08-06 23:58:49
48
原创 整理2年多的沉思录-人生说
这是学习笔记的第2471篇文章 我对于“沉思录”这个名词有着很深的执念，曾经想写一本DBA沉思录题材的书，也做过一些有关沉思录名词的技术演讲。马可·奥勒留的伟大之处则在于他在很早就实践并且留下了《沉思录》。在不同的人生阶段都会碰到不同的问题，遇到问题则需要解决问题，这是一句正确的废话。不同之处则在于，面对问题你是否逃避了，深入思考了，实践了，话里话外都是简单的道理，但是大部分人却过不好一生，...
2023-08-03 08:03:00
499
转载 基于DTS的大数据同步，如何选择最佳方案？
一、前言在《腾讯云数据库DTS发布全新数据集成方案：全增量无缝同步，快速构建实时数仓》一文中，我们介绍了如何使用DTS的「数据同步」服务，将MySQL数据同步到Ckafka并应用于大数据场景中。读者可能会产生疑问：DTS的「数据订阅」服务也提供了类似的功能，那么这两者有何区别，实际使用时应如何选择？为此，本文将为您详细介绍相关内容。二、为什么会形成两种方案？2.1 关于DTSDTS是腾讯云自主研发...
2023-07-27 22:35:58
68
转载 MySQL Explain 中 filtered 列知多少？
最近同事问，MySQL Explain 中 filtered 列也是表示过滤，为什么过滤是100%的时候，查询效率也很高呢？一开始以为是个别同事遇到的困惑，没太当回事，就进行了一对一解答，后来发现团队不少同学都有相同的疑惑，于是就有了这篇文章。先说结论：对于 MySQL Explain 结果，filtered 列不并需要太关心，重点关注type、key、rows以及extra等列。尤其是rows列...
2023-07-24 22:12:20
155
转载 MySQL 8.1及MySQL 8.0.34 正式发行
千呼万唤始出来的新版本MySQL 8.1及MySQL 8.0.34于2023年7月18日正式发行。从此，MySQL将开启创新版和稳定版同时发行的阶段。MySQL 8.1是MySQL的首个创新版，该版本主要增加了如下功能 :捕捉EXPLAIN FORMAT=JSON 输出，为EXPLAIN FORMAT=JSON增加INTO选项,可以将JSON格式的输出保存在一个用户变量中。保留客户端注释...
2023-07-19 07:51:54
513
转载 技术分享 | 又是一条慢 SQL 改写，拿捏！
作者：马文斌MySQL 爱好者。本文来源：原创投稿* 爱可生开源社区出品，原创内容未经授权不得随意使用，转载请联系小编并注明来源。1背景开发同学丢了一条 SQL 过来。“马哥，看看这条 SQL 能否优化，业务那边反馈很慢！”看了下执行计划+表结构，索引都没问题。那到底是怎么回事呢？咱们一起来瞧瞧。2分析原 SQLexplainSELECTcount(0)FROM...
2023-07-18 07:21:44
52
原创 呼伦贝尔游记第二篇
这是学习笔记的第2470篇文章 继第一篇之后，呼伦贝尔游记第一篇，其实行程的项目还是蛮多的。我来继续梳理下。我们的行程大概是这样的一个范围。其实在脑海里也一直在琢磨一个想法，呼伦贝尔除了草原还有什么？我在想怎么去更好的理解草原文化，否则就是行于表面而很难了解更有意思的东西。那么草原文化有哪些值得了解的呢？我觉得一方面是草原特有的文化特色，比如蒙古包，骑马，马术等，第二是呼伦贝尔所处的地理位...
2023-07-13 10:27:12
61
原创 呼伦贝尔游记第一篇
这是学习笔记的第2469篇文章到暑假了，带孩子出游排上了日程，第一天孩子放假，第二天就开启了旅程。为什么选择呼伦贝尔首先选择的出发点就是气候，要凉快一些，当看到呼伦贝尔的气温是在24度左右的时候，真是完美贴合。其次是小时候学习的“风吹草低见牛羊”带给我们很多遐想，就想一睹风采，尤其是带着孩子，能够在孩子心中种下小小的种子也不错，同时带着老人，草原旅程也会相对轻松简单一些，最后最关键的则是草原...
2023-07-10 23:51:26
63
转载 云厂商MongoDB性能测试
0、概述由于工作关系，笔者曾对国内外四家云厂商巨头的 MongoDB 产品做了性能测试，测试对象是托管的 MongoDB V4.0 三节点副本集架构。由于不同云厂商的产品规格并不统一，比如 MongoDB V4.0副本集架构国内的A云、T云有4C8G的规格，国内的H云和国外A云（以下采用AW云）并没有该规格。因此，H云选择4C16G规格替代，AW云选择4C32G规格替代。另外，这次测试是2022...
2023-07-06 08:18:29
67
原创 关于火柴棒数字游戏的方案设计思考
这是学习笔记的第2468篇文章 同样，这是一个耽搁了数月之久的事情，关于火柴棒数字游戏，在奥数题中经常能刷到，还是蛮考验思维的。孩子很喜欢这种题目，我也觉得有意思，所以就花了一些时间琢磨了下。比如 拿走一根火柴棒，使得下面的等式成立或者是我在去年发的一道题目，一道移动火柴的题目，要不要试一下这种题目难就难在，可以同时有多种解法带着好奇心，我做了下分析，怎么能够写程序生成这样的题目，我没有着急...
2023-07-05 08:20:41
106
原创 MySQL开发规范之数据类型设计规范
这是学习笔记的第2465篇文章说来惭愧，这是耽误了将近1年的工作，一直零零散散拖着没做完，昨天总算是卯着劲出了一个版本。 最初是打算更新一版MySQL开发规范，把一些新的技术栈和思路都更新迭代，与时俱进，但是做了一段时间，发现这件事情比自己想得要复杂。比如：1）索引设计规范，就得从更高的维度去思考什么样的索引是最合适的，需要有哪几个重点要素考量，这个话题就开水考验我的思考能力了。2）SQL...
2023-06-28 08:48:05
109
原创 GPT所想即所见的快速解惑
这是学习笔记的第2464篇文章在很多年前，自己脑袋里面冒出来这样的一段文字，黑暗中一个孩子站在田野上看着另外一个孩子 就好像自己在看自己。说是感慨也好，伤感也罢。那种画面感是一直难以名状的，最近试了下GPT，给我了一些灵感和部分答案。画一幅画，黑暗中一个孩子站在田野上看着另外一个孩子 就好像自己在看自己。画一幅画，黑暗中一个孩子站在田野上, 就好像在看虚拟世界的自己。背景有一颗大树，有萤火虫、星...
2023-06-26 22:20:25
862
转载 数据库多元发展下的新跃迁：索引推荐、分布式图存储、稳定性可靠性建设、AI转型丨Gdevops北京站...
大模型、生成式AI的迅速蹿红，引爆了新一轮的信息技术革命，算力逐步成为赋能全行业数智化转型的基础能源，也拓展着各类技术领域的能力边界和想象空间。当前，人工智能与数据库的技术融合作为学术界和工业界的探索方向，已取得了不少突破性进展，随之而来的挑战更多是聚焦于数据库的底层设计与架构优化。与此同时，AI从前沿科技落地产业应用，加速着传统运维的“改朝换代”，人机协同的AIOps工作模式被普遍认为是数智时代...
2023-06-26 22:20:25
71
转载 网易严选全链路数据治理的实践与总结
本文根据祝佳俊老师在〖2023 中国数据智能管理峰会-上海站〗现场演讲内容整理而成。分享概要一、面临的问题二、全链路数据治理平台三、数据开发治理四、总结&未来规划一、面临的问题自16年成立以来，网易严选已经发展了7个年头。数据一直是网易严选的核心资产，支撑着我们的业务发展，大数据平台也在严选成立不久之后就开始建设了。我们的大数据基础组建主要包括HDFS存储系统、Kafka/Pulsar等消...
2023-06-25 22:18:03
445
转载 落枕了
这是学习笔记的第2463篇文章 这几天真是爆热，热得一塌糊涂。昨天去雁栖湖附近，出门喝了差不多5瓶水，外加半个西瓜，然后睡了一觉，早上醒来就落枕了。在我的印象中，好像只有那么2-3次的落枕经历，这次是左转时头疼，这种难受劲感觉脖子被揪住了，痛点到达顶点时，只要保持不动，几秒钟过去才能慢慢适应下来，孩子看着我龇牙咧嘴的样子，很好奇，我只能一遍解释一遍小心翼翼，生怕受到二次伤害。有时候真想自我...
2023-06-24 22:15:55
52
原创 关于数据库运维系统的一些思考
这是学习笔记的第2461篇文章 前段时间整理了一下数据库运维系统的一些内容，比自己预期的要难一些。我来简单回顾下一些参考点。一、立足当下，混沌之中梳理问题 通常我们可以会问为什么，即为什么要做数据库运维系统，但是我们先放一放，不用完全从0到1的思考，而是立足当下，当前的数据库运维系统到底有什么问题？ 零零散散收集上来几十条，我重新组织整理，按照大的维度拆分后，又重新组织和补充了下,这...
2023-06-21 15:17:53
411
转载 数据库运维管理平台面面观
近期因工作需要对国内数家主流的数据库运维管理平台做了个调研，同时对这一产品的发展演进趋势做了简单分析，供大家参考。1. 数据库运管平台演进与特点近年来，数据库运维管理平台市场非常活跃，涌现出一批有代表性的厂商产品，其背后也是数据库管理需求变化所致。在深究下来，也是近些年数据库技术演进与管理方式的变化所致。如上图艾瑞整理的演进变化，从中我们可以观察到较之以往的差异。下面我们聊聊有哪些鲜明的特点变化。...
2023-06-19 22:25:49
60
转载 SQL治理高阶实践：异常防御体系建设与应用挖掘
本文〖deeplus直播：数据库应用与架构的创新实践〗线上分享演讲内容整理而成。作者介绍蔡朋，货拉拉DBA负责人。分享概要一、防微杜渐：异常SQL防御体系建设二、深度观测：全量SQL分析与挖掘三、容量预测：数据库仿真流量压测一、防微杜渐：异常SQL防御体系建设1.SQL治理阶段如上图所示，SQL治理的基本阶段主要包括开发（事前）、测试（事中）、生产运维（事后）三阶段。在开发阶段，研发通常不受相...
2023-06-18 22:28:05
53
原创 一个床垫的故事
这是学习笔记的第2460篇文章这是一个床垫的真实故事，想起来还是蛮感慨的，真是太魔幻了。起因是我哥搬家，有一个很新的品牌床垫，因为新房子那边买家具已经送了一个床垫了，所以就多出来一个床垫，他打算把这个蛮好的床垫给我。听起来是一件挺简单的事情，但是引出了一些列小插曲。首先床垫的尺寸是1.8M*2M,是比较大的那种，一般都是1.5M的，当时也偷懒没量尺寸，就想拿过来应该能用上。把诺大的床垫拉过...
2023-06-15 22:30:35
502
转载 一个卡车司机的理想
无意中听到这个故事，查了下，好想是有这么回事挺感动的央视著名主持人崔永元，在一次与观众互动交流中，说了这样一个故事。他说，一次，他在美国录制节目，在马路上，他看到一辆大卡车停在路边。他发现，这辆卡车很大、很漂亮、很气派，车上装着满满的货物，但这辆卡车很干净，干净得很养人眼，车上还挂着许多小装饰，可以看出主人对这辆卡车十分爱惜。 凭着一种职业的敏感和好奇，崔永元走了上去，想和这辆卡车司机聊...
2023-06-14 00:07:10
44
转载 高考
高考真是目前人生阶段中最公平的筛选方式下午考场开放 老师和学生都陆陆续续来了在校门口看到家长送孩子进考场的小心翼翼，看到热情的老师击掌鼓励，感觉教育真是一件社会价值很高的事情。高考仅仅是开始，甚至还远没有开始...张桂梅校长真是一个大好人 计划几年内带孩子去张桂梅的学校里参观一次，捐款生活中的成就各有所知，没人关心你的纠结去看看外面，能让自己更释然...
2023-06-07 21:58:11
49
转载 B站服务稳定性建设：高可用架构与多活治理
本文根据吉翔老师在〖deeplus直播：甩掉技术债包袱，B站的SRE体系建设与转型实践〗线上分享演讲内容整理而成。吉翔哔哩哔哩基础架构部 资深运维工程师负责在线业务SRE相关工作，深度参与业务多活建设项目。当前继续专注于核心业务多活建设推进、多活管控治理等工作。分享概要一、高可用多活架构二、业务多活改造三、多活管控与治理一、高可用多活架构相较于传统的灾备单活的架构，多活指的是在同城或异地的一个数...
2023-06-01 22:16:33
110
原创 长沙之行第二天
这是学习笔记的第2458篇文章已经从长沙返京一个多星期了，旅行日记还没有写好，真是羞愧，赶紧补一补回忆。整体来看返京后这一周我最大的变化就是几乎每天都订1次外卖吃长沙牛肉粉。第二天自第一天逛完橘子洲之后，我们的行程重心就打开靠近岳麓山附近，所以第二天早晨退了国金附近的酒店，准备去岳麓山，整个一天实际的行程是这样的：嗦粉->岳麓书院>湖南大学>黄兴步行街->长沙南站长...
2023-05-31 08:59:17
1040
转载 国产数据库的谱系
目前国产关系型数据库已经有上百种，比较知名的也有好几十种，其中大多数都和某些开源数据库或者开源组件有关。实际上我并不反对国产数据库基于开源代码构建，因为利用开源代码可以缩短国产数据库研发与上市的时间，缩短国产数据库与国外商用数据库的技术差距。数据库是在应用中不断磨合出来，而不是简单的研发出来的。很多朋友喜欢讲某某数据库技术很先进，用了很多新技术。如果为了满足某个用户的特殊应用场景需求而使用某些先进...
2023-05-28 22:25:25
72
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人