网易云音乐-面临百万请求的最优方案(公开课-笔记)

最新推荐文章于 2020-08-14 17:21:54 发布
最新推荐文章于 2020-08-14 17:21:54 发布
阅读量418 收藏
点赞数
分类专栏： 自学01.Java高--高性能编程专题
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_39088066/article/details/101792041
版权

平台构成

歌曲模块:

歌名 ,专辑,歌手,歌词,封面

下载 ,收藏 ,分享

用户模块

权限

用户信息

评论模块

在这里插入图片描述
在这里插入图片描述

分析

针对解决突然都大量的人 对同一个app,软件进行请求 而采取的解决方法
负载均衡器
微服务拆分

初级版本

在这里插入图片描述
数据库能否对成千上万的线程的查询操作 快速响应?

  1. 数据库每秒执行事务数有限(连接池爆满) , 出现查询速度很慢的情况.---->响应不及时 程序奔溃

奔溃:请求—生成—>线程----处理慢—>线程**堆积(**吃掉内存 , cpu)

头重脚轻的架构, 菜鸟

数据库-------程序员第一个瓶颈

在这里插入图片描述

怎么办? 缓存redis[一个类似HashMap]

在这里插入图片描述

但是

在这里插入图片描述

优化

在这里插入图片描述

主角: 请求合并

在这里插入图片描述

在这里插入图片描述
阻止了原来的 传参–调用方法
吧请求存起来 :本质是将请求时传来的参数 存起来

代码(测试逻辑)
  1. 请求收集,(Addto Queue)
    在这里插入图片描述
  2. ,定时任务 queue清除 处理
    在这里插入图片描述

现在主流的架构设计

在这里插入图片描述

在这里插入图片描述

欢乐大象
关注
专栏目录
ChatGPT和GPT-4带你选笔记本电脑
herosunly的博客
04-11 14万+
本文介绍核心内容为用好ChatGPT之准确分配角色，希望对学习和使用ChatGPT的同学们有所帮助。为了兼顾质量和速度，本专栏的更新频率为一周一到两更。 文章目录 1. 前言 2. 使用ChatGPT给出选择建议 3. 使用GPT-4给出选择建议
网易公开课哈佛大学CS50学习笔记
qq_29573489的博客
01-07 1146
网易公开课哈佛大学CS50学习笔记 (原创) 转载请注明出处  网易公开课哈佛大学CS50听课笔记 2.算法是什么 计算机如何运作？ 0,1 8 个比特是一个字节   gcc编译讲解 3.c 语言 编译 与源代码 语法 变量类型  先后次序 bool型  转移字符  4. 边敲实例边讲解。    讲解float类型时 printf %f  
网易公开课“Programming Paradigms” 笔记
铅笔楼的专栏
08-01 911
网易公开课中提供的“Programming Paradigms”由杰弗瑞·凯恩（Jerry Cain）讲授，共27集，中英文字幕。Jerry 还是facebook公司的engineer。从序号看，这些属于课程CS107。在Stanford官网上可以看到CS107是该校编程系列课程之一。
RocketMQ高并发项目——Hystrix断路器之降级、限流、批量请求合并
哈喽羊
05-08 686
在微服务架构中，我们将系统分成了一个一个单元，各个单元应该通过服务注册与订阅的方式进行一个相互依赖，每一个单元在不同的进程中去运行，依赖通过远程调用的方式运行，这样就会产生一些问题，比如网络延迟、自身系统故障、请求急剧增加导致任务挤压、线程资源无法释放，这些很可能会导致系统瘫痪，甚至影响到一些核心业务。 一. 降级 我们具体来实现下： 在父工程RocketP...
Java高并发下请求合并如何处理
Soda_lw的博客
04-01 3096
场景描述：在大并发量下每秒有一万个请求向后端查询数据，这样我们就需要向后端请求一万次，甚至查询一万次数据库。我们要做的请求合并就是每隔一段时间（10ms）将这段时间内的请求合并到一起进行批量查询，减少查询数据库的次数。 思考： 1、如何存放一段时间内的请求？这里我们可以用队列。 2、如何每隔一段时间执行任务？用定时任务线程池。 3、每个请求都是单独的线程，如何保证各个请求能得到自己的查询结果？这里...
利用请求合并发挥高并发下批量处理的优势
chenzihao36的博客
06-18 1018
利用请求合并发挥高并发下批量处理的优势 一、需求分析： 我们经常会写一些查询接口，假设现在我们需要写一个查询用户信息的接口，要求传入用户Id，返回用户名称。那么最简化的流程就是：用户发送请求->controller层->service层->dao层->数据库。每次请求就相当于请求一条用户信息。当这个接口被用户频繁请求时，此接口就不断的在做“请求”到“返回”的操作，服务端同时会开辟许多线程帮我们执行这些操作，这么多的线程会消耗许多系统资源，服务端承受了巨大压力。 //单查询接口 @Ge
斯坦福机器学习ML公开课笔记1-15（完整版、带目录索引和NG原版讲义）
11-07
公开课笔记7——最优间隔分类、原始/对偶问题、SVM对偶 公开课笔记8———核技法、软间隔分类器、SMO算法 公开课笔记9—偏差/方差、经验风险最小化、联合界、一致收敛 公开课笔记10——VC维、模型选择、特征选择 ...
斯坦福ML公开课笔记(中文版7-11)
11-06
这些笔记内容涵盖了机器学习的多个重要主题，旨在帮助学习者深入理解这些模型的工作原理和应用场景，提升数据分析和机器学习项目的能力。通过阅读和研究这些资料，可以增强对机器学习理论和实践的理解，为进一步的...
斯坦福ML公开课笔记(中文版1-6)
11-06
**混合高斯模型** ...这些笔记内容涵盖了机器学习的多个重要概念，对于深入理解机器学习理论和应用具有极高的价值。通过阅读和学习，你可以掌握这些模型的工作原理、应用场景以及如何在实际问题中应用它们。
vue+elementUI实战之网易云音乐--半月总结！！！
xhyxxhwns的博客
05-16 3366
vue+elementUI实战之网易云音乐--半月总结！！！模仿网易云音乐pc端项目搭建基本项目引入项目中使用的东西------axios，element-Ul遇到的问题 模仿网易云音乐pc端 先写写心得体会吧，经过半个月，我实现了网易云音乐的一些功能。最开始的时候，我记得我几乎写点东西，就会去看我学vue的笔记，（笔记真的好有用，什么忘记了，就拿出来看看，不懂的再百度）。我觉得这半个月最难的就是，音乐播放部分了，终于昨天晚上，我成功的实现了音乐自动播放下一首，点击按钮切换上一首，下一首，我真的好开心，哈哈
ai讲师人工智能讲师叶梓《人工智能概念入门》机器学习深度学习讲师-17
人工智能讲师分享前沿技术
06-12 257
课件为人工智能讲师叶梓人工智能基础课程之一，接上一篇，更多课程，及老师资料可点击 个人主页 （人工智能基础课件34-36页） EM迭代概述 EM 的具体过程： 先根据假定的参数来计算隐藏变量的分布； 并根据隐藏变量的分布来更新参数的期望； 如此迭代，直到收敛。 Python实现的EM #coding:gbk import math import copy import numpy as np import matplotlib.pyplot as plt ..
网易公开课-MIT麻省理工学院《算法导论》 学习笔记（1）
大羚羊的学习博客
06-12 6182
本文为麻省理工学院《算法导论》课程第一讲的学习笔记。 网易云课堂上该课程的网站为http://open.163.com/special/opencourse/algorithms.html。   第一部分 算法分析（Analysis of Algorithm） 目录 1. 前言 2. 插入排序（insertion sorting） 3. 分析的种类  4. 插入排序的最差情况是什么...
高并发情况下，我们系统是如何支撑大量的请求的
三木的IT路
09-05 3224
1、尽量使用缓存技术， 包括用户缓存，信息缓存还有静态页面缓存，多花点内存来做缓存，可以大大减少与数据库的交互次数和tomcat执行次数，减少不变的数据重复在tomcat和数据库中获取的次数。 2、同步转异步， 对于一些不需要即时结果的操作，可以使用MQ消息机制，达到同步转异步的效果，如秒杀系统，正常流程：先点击秒杀，然后往服务器发送请求，在页面等待响应，这样融入大量请求，服务器压力会特别大，搞不...
高并发访问请求合并学习笔记
weixin_42879686的博客
02-15 353
用户请求 —— 网关 —— 微服务 —— db 这样的方式对高并发的请求的线程快速的相应，因为数据库的每秒执行的事务数有限，很容易出现慢查询，此时数据库就成为了第一个瓶颈 为了解决这个问题，有两种策略 1:空间换时间，通俗来讲就是用钱砸，例如集群、负载均衡、可以买TPS（数据库每秒执行的事务数）、 QPS（数据库每秒执行的SQL数）更高的数据库等等。 2:时间换空间，通俗来讲就是以技术的方式解决...
Java高并发下请求合并
Paranoid_94的博客
08-14 750
1、 LinkedBlockingQueue队列将请求存放起来 2、ScheduledExecutorService定时任务调度，每隔一段时间执行任务处理队列里的请求 3、 CompletableFuture完成线程任务，返回结果 @Service public class QueryService { //定义一个内部类，用来封装请求的数据 class RequestData { String code; CompletableFuture<Map&l
性能优化（一）请求合并提升性能--多线程技术 （高并发场景）
angel192939的博客
06-23 284
请求合并提升性能--多线程技术 1.请求合并描述 什么是请求合并？ 为什么要使用请求合并技术？ 2.设计思路 如何实现一个请求合并？ 设计思路是什么？ 3.具体实现 使用多线程技术写出请求合并的功能 4.体系拓展 如Hystrix类似功能演示SpringCloud最新状态描述 引言:现在互联网公司主流开发设计，如网易课堂，爱奇艺等 ，一般大致都是类似的。 vue、RN、Flutter、A...
高并发下合并接口请求
无趣的码农
08-29 7987
在有一次对商品详情页进行压力测试时，因为商详页的数据来源非常多，经过的服务多，调用链很长，所以查询数据库的次数也就非常多，数据库连接池很快就被用光，导致很多请求被阻塞，也导致应用整体线程数非常高。虽然通过增加数据库连接池大小可以缓解问题，并且可以通过压力测试，但这治标不治本。商详页中有很多查询已经做了缓存，但还是有些如促销、（活动）价格、库存等是不能缓存（或是不能缓存太长时间）。        
Java请求合并与分而治之
04-12 2704
在系统设计的时候，你是否也遇到过这两个问题： 1、大量请求造成数据库压力过大 2、大量数据库查询造成请求执行时间过长 本文将介绍在高并发、大数据环境下，以上两种问题的应对思路。 一、请求合并 首先思考一个场景，在高并发的系统中，在每秒内有大量的请求要访问数据库，如果不考虑缓存，怎么才能够处理降低数据库压力。有的同学可能会说这多简单啊，增加带宽，加内存提升服务器性能。 如果不用这些...
网易云音乐评论模块高并发下的设计思考
Kindle_code的专栏
08-01 1017
主要讨论的功能 (基于高流量高并发的场景) 评论资源 评论总数的更新 评论点赞 精彩评论的读取 评论表设计(简约版) 这是资源通用的表设计 高并发下的问题 热点数据并发量极高 评论的新增，更新CommentResource的评论总数，存在并发问题 评论的点赞数也是同样的问题 四大业务模块详解 评论发表，如下图 通过异步化的操作，来解决行锁竞争给核心资源MYSQL带来压力，保证系统平稳平滑。 在异步化的场景下，同时带来的问题 1、评论的有序性质: 评论的发布本周没有逻辑上的有序，最终展示通过发
MIT线性代数公开课笔记-行图像与列图像解析
“线性代数-笔记.pdf”是麻省理工学院教授Gilbert Strang的线性代数公开课笔记，涵盖了线性代数的基础知识，包括矩阵理论、方程组、向量空间、行列式、特征值、相似矩阵和正定矩阵等内容。 线性代数是数学的一个...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值