80篇数据库&大数据精华内容

八天小长假，一个难得的查漏补缺、学习充电的好时机！平时因为忙碌而错过的技术干货，不如重拾一次酣畅淋漓；那些读过后为之鼓掌的优质好文也不妨温故而知新~为了方便大家查阅，dbaplus社群对近一年发布过的干货好文进行汇总打包，诚意奉上。

 

干货合集第一弹，我们分别甄选了数据库和大数据领域共80篇精华内容，内容涵盖MySQL、去O、分库分表、SQL优化、数据库选型、数据仓库、Elasticsearch、Kafka……戳标题即可阅读原文↓

 

数据库系列

 

 

MySQL

 

 

• 工行分布式数据库选型与大规模容器化实践-顾龚磊

• MySQL DBA必读：万字归总表设计与SQL编写技巧-刘书浩

• 值得收藏：一份非常完整的MySQL规范-听风

• 巧用这19条MySQL优化，效率至少提高3倍-喜欢拿铁的人

• 我以为自己足够了解MySQL索引，直到遇见阿里面试官……-Java之道

• MySQL亿级数据量实时同步，小米如何完美hold住-刘心光

• 美团MySQL巡检系统：上线一年，治理8000+核心隐患-王琦   

• 年薪50万的DBA必须了解的MySQL锁和事务-keme  

• MySQL性能优化做得好的人，都懂的索引绝技-腾讯技术工程    

• 抛开复杂的架构设计，MySQL优化思想基本都在这了-赵栩彬   

• MySQL主从复制虽好，能完美解决数据库单点问题吗？-听风   

• 大牛是怎么思考设计MySQL优化方案的？-惨绿少年

 

 

去O

   

 

• 工行“去O”数据库选型与分布式架构设计-魏亚东

• 为什么“去O”唯有PG- digoal（德哥）

• 从Oracle到MySQL，金融核心场景在线换库落地实战-王英杰 

• openGauss可替代Oracle吗？从字段类型说起……-洪烨  

• 实操：从Oracle到GaussDB的数据迁移-莫熙钟  

 

 

分库分表

 

 

• 分库分表 or NewSQL数据库？终于看懂应该怎么选！-温卫斌

• 分库分表这样做，永不迁移数据且避免热点-java架构交流

• 不要NoSQL/NewSQL，也不要分区，直接分库分表！-阿飞的博客

• 出现这四种情况，才是考虑分库分表的时候！-坚持就是胜利 

• 当数据库扼住系统性能咽喉，直接分库分表能解决吗？-王克锋   

• 分库分表就能无限扩容吗？-莫那·鲁道

   

 

SQL优化

 

 

• 解决棘手SQL性能问题，我的SQLT使用心得-丁俊   

• 实用排坑帖：SQL语句性能优化操作策略大全-SimpleWu

• 不看后悔的腾讯面试题：SQL语句为什么执行的很慢？-帅地    

 

 

数据库选型

 

 

• dbaplus Newsletter 2019年12月刊

• dbaplus Newsletter 2020年4月刊

• dbaplus Newsletter 2020年8月刊

• 从MongoDB迁移到ES后，我们减少了80%的服务器-李猛 

• 腾讯云数据库副总监：图数据库好在哪？该用在哪？-邵宗文 

• 实时数据库：一夜之间，我感受到了时序数据库的威胁-王妙琼  

• 你需要的不是实时数仓，而是一款强大的OLAP数据库-王知无

• MySQL和PG到底哪个更好用？-张龙的思考 

• 选型必读：三种开源数据库在平安科技的构建与应用-汪洋 

• 弥补MySQL和Redis短板：看HBase怎么确保高可用-张小渔  

 

 

更多数据库好文

 

 

• 看到外卖平台这样改善数据库架构，DBA表示放心了-虢国飞 

• 早在公元前五百年，孙子就参透了数据库分区的真谛-宇文湛泉   

• 十年难得一遇！从数据误删到全量恢复的惊险记录-贝壳找房DBA团队   

• 七问Redis，才知道我与技术大牛的差距在哪里-陈于喆   

• 堪比“外挂”的缓存系统，让数据库压力降低90%！-Chaplin  

• 数据库并发2万就跪了？你需要这份指导性的知识框架-Lenis

• 单线程的Redis为什么这么快-刘莅     

• 半天搞定数据库迁移10亿级数据-菜菜

• 百亿级图谱的毫秒级查询：贝壳分布式图数据库选型与实践-高攀

• 阿里巴巴HBase高可用8年填坑实录-daniel.meng    

 

 

dba+开源工具

 

 

• 图形化显示MySQL慢日志-贺春旸

• 面向开发的MongoDB图形可视化监控-贺春旸

• 面向开发的MySQL图形可视化监控-贺春旸

• MySQL 8.0 MGR高可用VIP切换脚本-贺春旸 

• 傻瓜式免安装搞定Centos资源监控-贺春旸

• 可视化分析MongoDB慢查询日志-贺春旸

• MySQL 8.0 MGR自动安装配置脚本-贺春旸   

 

 

大数据系列

 

 

数据仓库

 

 

• 从数仓到数据中台，谈技术选型最优解-颜博

• 我该建数仓、大数据平台还是数据中台？看完脑子终于清醒了-追梦IT人

• 从数据仓库、数据湖，到数据中台的差异与架构演进-杨青  

• 阿里云数仓总架构师：企业大数据平台仓库架构建设思路-李金波   

• 基于Flink的实时数仓平台有多强？每秒处理1.5亿条消息-鲁昊     

• 太完整了！无懈可击的数据仓库体系规划及实施流程-水大人 

• 另辟蹊径建数仓，美团外卖为什么选用Doris（精品干货）-朱良 凯森   

• OLAP数仓进阶：主流开源OLAP系统的分类及核心技术点-温正糊

 

 

Elasticsearch

 

 

• Elasticsearch对垒8大竞品技术，孰优孰劣？-李猛   

• ES既是搜索引擎又是数据库？真的有那么全能吗？-李猛   

• 让Elasticsearch飞起来！百亿级实时查询优化实战-土豆的奥特之父   

• ES千万级TPS写入性能翻倍，400台物理机因此下线-魏子珺  

• 从平台到中台 | Elasticsearch在蚂蚁金服的实践经验-善仁 

• 面试陷阱：数十亿级别数据下，如何提高ES查询效率？-节操泛滥的程序员  

• ELK跳不过的ES，图解助你掌握内部模型及数据结构-Richaaaard 

 

 

Kafka

 

 

• 千亿级数据量的Kafka深度实践- 严锁鹏  

• Kafka凭什么速度那么快？-邴越  

• Kafka如何实现每秒上百万的高并发写入？-中华石杉  

• 很到位！原来这才是Kafka的“真面目”-郑杰文 

• 压箱底总结：流系统Spark/Flink/Kafka/DataFlow端到端一致性对比-阿莱克西斯   

• 选型必看：RabbitMQ 七战 Kafka，差异立现-王欢 

 

 

更多大数据好文

 

 

• 趣头条基于ClickHouse玩转每天1000亿数据量-王海胜

• Clickhouse替代ES后，日志查询速度提升了38倍！-Gavin Zhu    

• 大数据平台最常用的30款开源工具-谢鹏  

• 数据一致性“老大难”，美团数据治理平台怎么治好的？-李鹏 夷山 永超  

• 建议收藏！一张图建立全面的大数据知识体系-徐强  

• 闲鱼每秒千万级的实时数据处理是怎么实现的？-靖杨  

• Flink替代Spark Streaming怎么样？本篇给你答案-孙赵宏