性能测试和优化
文章平均质量分 86
000X000
这个作者很懒,什么都没留下…
展开
-
Python 多线程消费Kafka 提高吞吐量
Python 多线程消费Kafka 提高吞吐量原创 2024-07-25 10:52:08 · 183 阅读 · 0 评论 -
亿级大表拆分过程记录
亿级大表拆分过程记录原创 2023-05-26 21:13:44 · 634 阅读 · 0 评论 -
从 Elasticsearch 到 Apache Doris,10 倍性价比的新一代日志存储分析平台
从 Elasticsearch 到 Apache Doris,10 倍性价比的新一代日志存储分析平台原创 2023-05-15 15:53:22 · 1641 阅读 · 0 评论 -
2023年 explain 关键字完全指南
2023年 explain 关键字完全指南原创 2023-04-03 09:18:10 · 388 阅读 · 0 评论 -
2023-Hive调优最全指南
2023年Hive调优最全指南原创 2023-03-22 16:28:25 · 580 阅读 · 0 评论 -
MySQL 企业级开发规范
MySQL 企业级开发规范原创 2022-06-29 17:21:04 · 118 阅读 · 0 评论 -
图解MySQL的binlog、redo log和undo log
图解MySQL的binlog、redo log和undo log原创 2022-06-23 15:04:18 · 455 阅读 · 0 评论 -
为什么SELECT * 会导致查询效率低?
为什么SELECT * 会导致查询效率低?原创 2022-06-23 14:59:38 · 1601 阅读 · 0 评论 -
SQL 优化经历:从 30248秒到 0.001秒的经历
SQL 优化经历实战原创 2022-06-23 14:57:10 · 6085 阅读 · 9 评论 -
MySQL全面快速优化参考
MySQL全面快速优化参考原创 2022-06-13 11:38:58 · 460 阅读 · 0 评论 -
详解分布式系统的缓存设计
详解分布式系统的缓存设计原创 2022-06-13 11:37:57 · 800 阅读 · 0 评论 -
系统升级到集群系列概述
系统升级到集群系列概述原创 2022-05-28 16:15:54 · 160 阅读 · 0 评论 -
Clickhouse 开发实践总结
Clickhouse 开发实践总结原创 2022-05-28 16:05:09 · 363 阅读 · 0 评论 -
Kafka 万亿级消息实践
Kafka 万亿级消息实践之资源组流量掉零故障排查分析原创 2022-05-23 09:33:15 · 737 阅读 · 0 评论 -
MySQL进阶面试题完全攻略
MySQL进阶面试题完全攻略原创 2022-05-16 09:16:17 · 585 阅读 · 0 评论 -
数据仓库的治理方法
数仓治理数仓治理的老大难,通常是跟着业务需求快跑,要不是数据零散在各个团队,或者是大家的研发规范有不同,作为一项通过维度模型来约束规范的工种来讲,“模型”的治理难度,大于“架构”。目前整个行业通常的模型治理方法,是规定一种建模规范,大家在编码的过程中各自遵守。当业务开始变得模糊不清的时候,再专门抽调时间,来做人工治理。就像黄河一样,流沙清理了一次又一次,但上游还是会冲下新的流沙。数仓的假设既然都是采用的维度建模,那么其设计思想必然是自下而上的进行建设,与架构进行类比,也就是先做好子模块,最后原创 2021-03-31 11:32:52 · 650 阅读 · 0 评论 -
面试总结(七):大数据与高并发-2
问题导读:1、什么是分布式事务?2、什么是令牌桶算法?3、域名解析负载均衡算法是怎样的?七、阿里巴巴中文站商品信息如何存放看看阿里巴巴中文网站首页 以女装/女包包为例商品基本信息名称、价格,出厂日期,生产厂商等关系型数据库:mysql/oracle目前淘宝在去O化(也即拿掉Oracle),注意,淘宝内部用的Mysql是里面的大牛自己改造过的为什么去IOEIBM小型机 廉价的PC机oracle数据库 myqlEMC存储集中式------>分布式2008年,王坚加盟阿里巴巴成为集团首席架构师,即.原创 2021-03-17 09:38:08 · 291 阅读 · 1 评论 -
面试总结(七):大数据与高并发-1
问题导读:1、秒杀系统的架构设计是怎样的?2、为什么要使用NOSQL NOT ONLY SQL?3、传统RDBMS和NOSQL的区别是什么?大数据与高并发一、秒杀架构设计业务介绍什么是秒杀?通俗一点讲就是网络商家为促销等目的组织的网上限时抢购活动比如说京东秒杀,就是一种定时定量秒杀,在规定的时间内,无论商品是否秒杀完毕,该场次的秒杀活动都会结束。这种秒杀,对时间不是特别严格,只要下手快点,秒中的概率还是比较大的。淘宝以前就做过一元抢购,一般都是限量 1 件商品,同时价格低到「令人发齿」,这种秒杀一般原创 2021-03-17 09:35:54 · 269 阅读 · 0 评论 -
面试总结(六):搜索索引
问题导读:1、如何理解用户输入查询语句?2、如何根据得到的文档和查询语句的相关性,对结果进行排序?3、如何计算权重(Term weight)过程?4、如何判断Term之间的关系从而得到文档相关性?搜索索引到这里似乎我们可以宣布“我们找到想要的文档了”。然而事情并没有结束,找到了仅仅是全文检索的一个方面。不是吗?如果仅仅只有一个或十个文档包含我们查询的字符串,我们的确找到了。然而如果结果有一千个,甚至成千上万个呢?那个又是您最想要的文件呢?打开Google吧,比如说您想在微软找份工作,于是您输.原创 2021-03-17 09:34:26 · 376 阅读 · 0 评论 -
面试总结(五):搜索引擎
问题导读:1、搜索引擎有哪些特点(优势)?2、搜索引擎使用到哪些场景中?3、如何将原文档传给分次组件?4、如何将得到的词(Term)传给索引组件(Indexer)?搜索引擎概述全文搜索就是对文本数据的一种搜索方式,文本数据的都多,可以分为顺序搜索法和索引搜索法,,全文检索使用的是索引搜索法特点(优势):做了相关度排序 对文本中的关键字做了高亮显示 摘要截取 只关注文本,不考虑语义 搜索效果更加精确——基于单词搜索,比如搜索Java的时候找不到JavaScript,因为它们是不同.原创 2021-03-17 09:33:21 · 236 阅读 · 0 评论 -
CDH优化(收藏篇)
目录1 测试环境参考方案1.0 资源:集群服务安排1.1 优化:Cloudera Management1.2 优化:Zookeeper1.3 优化:HDFS1.4 优化:YARN + MapReduce1.5 优化:Kafka1.6 优化:HBase1.7 优化:Hive1.8 优化:Oozie、Hue、Solr、Spark2 线上集群参考方案2.0 资源:集群服务安排2.1 优化:Cloudera Management2.2 优化:Zookeepe.原创 2020-08-21 11:48:16 · 1534 阅读 · 0 评论 -
性能测试和优化
性能测试性能测试主要是从视角标准、性能指标、性能测试方法和压力测试曲线图四个方向来学习的。视角标准性能指标性能测试方法压力测试曲线图性能优化性能优化是从软件性能优化原则、性能优化的一般方法和分层思想学习的软件性能优化原则性能优化的一般方法分层思想学习操作系统操作系统是从程序运行时架构、多任务环境、运行期状态和进程和线程分析学习的程序运行时架构多任务环境原创 2020-07-25 11:16:14 · 224 阅读 · 0 评论