- 博客(460)
- 资源 (2)
- 收藏
- 关注
RSS订阅转载 深度解析单线程的 Redis 如何做到每秒数万 QPS 的超高处理能力
有一次去面试服务器端岗位，面试官问我有一个连接过来，你该怎么编程处理它。我答道：“主线程收到请求后，创建一个子线程处理。” 面试官接着问，那如果有一千个连接同时来呢？我说“那就多创建一点线程，搞个线程池”。面试官继续追问如果一万个呢？我答道:“......不会...”。事实上，服务器端只需要单线程可以达到非常高的处理能力，Redis 就是一个非常好的例子。仅仅靠单线程就可以支撑起每秒数万 QPS 的高处理能力。今天我们就来带大家看看 Redis 核心网络模块的内部实现，学习下 Redis 是如何做到如此
2022-05-10 14:16:20
348
原创 分布式一致性hash、redis 集群的重要应用
一、算法背景一致性哈希算法在1997年由麻省理工学院的Karger等人在解决分布式Cache中提出的，设计目标是为了解决因特网中的热点(Hot spot)问题，初衷和CARP十分类似。一致性哈希修正了CARP使用的简单哈希算法带来的问题，使得DHT可以在P2P环境中真正得到应用。二、应用场景现在一致性hash算法在分布式系统中也得到了广泛应用，分布式系统中涉及到集群部署，包括缓存Redis集群，数据库集群，我们在使用Redis的时候，为了保证Redis的高可用，提高Redis的读写性能，最简单的
2022-04-13 17:31:32
205
原创 腾讯阿里工程师所热衷的DPDK到底是个什么东西？
dpdk是什么？可能很多人只是听过，有的可能听都没有听过。但是目前确实很多的互联网大小厂都在使用这样一门技术，从招聘网站上看，对应的岗位也很多，薪资不菲：比如OVS,VPP等技术，很多云厂家都在用，提供云主机，组件，数据库等等，它对比于原生，能够大幅提升IPV4的转发性能,可以让用户在迁移包处理应用时,获得更好的成本和性能优势。所以，随着技术的发展，dpdk会越来越受到重视，将广泛应用到各类分布式系统中。还不熟悉的朋友，这里可以先领取一份dpdk新手学习资料包（入坑不亏）：...
2022-04-13 14:29:49
424
原创 初学者也能看懂的DPDK解析
一、网络IO的处境和趋势从我们用户的使用就可以感受到网速一直在提升，而网络技术的发展也从1GE/10GE/25GE/40GE/100GE的演变，从中可以得出单机的网络IO能力必须跟上时代的发展。1. 传统的电信领域IP层及以下，例如路由器、交换机、防火墙、基站等设备都是采用硬件解决方案。基于专用网络处理器（NP），有基于FPGA，更有基于ASIC的。但是基于硬件的劣势非常明显，发生Bug不易修复，不易调试维护，并且网络技术一直在发展，例如2G/3G/4G/5G等移动技术的革新，这些属于业务的逻辑
2022-04-09 16:25:40
568
原创 AddressSanitizer，增强DPDK内存检测
前言当我们使用C/C++构建我们程序的时候，经常会遇到这类问题：问题难以复现；大压力下运行几天才能出现；大并发问题下，出现问题现场无法分析定位问题。经过大量的分析总结，发现这类难以解决的问题的原因大量集中在内存越界、内存重复释放等内存问题。这类问题大致由于分配给一个对象的内存，可能被其他程序重写，或者是由于某些计算错误，用了不属于你的内存。更崩溃的是如果它带有一定的随机性重现，当错误发生的时候，系统没有检测到异常，而是在以一定概率被其他程序重写或复用，问题发生了，这时候问题发生的地方与真正出问题的地
2022-04-09 15:54:36
413
原创 原创分析| 入门或者转行音视频，应该要怎么做？
这一两年因为该死的疫情，让短视频、超高清视频和实时音视频反而成为需求风口。我的看法当然是觉得音视频这个行业还可以，而且从我自己的观察来看，做音视频的现在普遍年龄都在 30+ 了，我 94 年的在组里有可能还是年龄最小的那一批人了。
2022-03-29 15:23:09
1108
2
原创 C++网络编程入门：轻量级Web并发服务器开发
目录1. 前言2. 学习路线2.1 C++2.2 计算机网络基础2.3 计算机系统基础2.4 linux基础2.5 服务端开发规范3. 并发服务器开发入门3.1 建立连接3.2 IO多路复用3.3 多进程并发3.4 多线程并发3.6 基于多线程并发服务器开发实例3.6.1 常见问题3.6.2 确定要实现的功能3.6.3 选定事件处理模式和并发模式3.6.4 确定线程交互方式3.6.5 类的定义与功能一、前言入坑C++以后虽然也参
2022-03-12 15:55:16
1674
原创 记一次音视频开发面试，已拿offer
最近也是有想进行一些工作上的变动，所以也在四处投递简历，主要的岗位还是音视频开发的岗位，毕竟在这个岗位上自己还是会有一点点技术壁垒的。不过其实说实在的，C++方向上我觉得有几个方向真的很不错：流媒体相关、服务器后台相关、游戏相关。
2022-03-10 16:54:35
1351
原创 2022年C++程序员的黄金发展方向：音视频开发
一、音视频开发行业分析招聘的公司招聘的公司行业分布广泛（以下列举大部分是互联网公司）◼ 互联网 掌门科技 哔哩哔哩 字节跳动 腾讯 欢聚时代 快手 阿里巴巴 虎牙 即构科技 网易 小米 商汤科技 融云 蚂蚁金服 爱奇艺 ...等等◼ 计算机软件 华为 海康威视 浙江大华 ...等等◼ 移动互联网 常相伴(互动娱乐) 声网 ...等等 ◼ 电子商务 京东 拼多多 美团 ...等等◼ 人力资源服务 Boss 直聘行业和薪资行业 ◼ 在线教育 ◼ 电商直播 ◼ 游戏直播 ◼ 小视
2022-03-09 15:50:13
675
1
原创 梳理LinuxC++服务器，6种epoll的做法丨简单实用的单线程epoll丨复杂的多线程epoll丨多进程epoll 丨协程 coroutine
梳理LinuxC++服务器，6种epoll的做法丨简单实用的单线程epoll丨复杂的多线程epoll丨多进程epoll 丨协程 coroutine免费学习地址：C/C++Linux服务器开发/后台架构师-学习视频教程高清学习路线地址：Linux C/C++后端服务器架构开发 成长体系更多技术知识点讲解领取：832218493（群）...
2022-03-03 15:48:48
179
原创 C/C++ Linux后台服务器开发高级架构师学习知识点路线总结（2022架构师篇完整版）
C/C++ Linux后台服务器开发高级架构师学习知识点路线总结（2021架构师篇完整版）前言：小编之前有跟大家分享过一篇架构师体系知识点总结的文章，今天在原来的基础上有所改变更新（2021版）。相信大家也知道，想要成为一名架构师肯定是需要一定的时间经验累积，才可以达到架构师的水平，今天分享的是成为架构师需要掌握的技术知识点，尽量的完善，目前对标的是知名企业腾讯、阿里等等后端开发岗位。今天更新的内容是从Linux高级互联网架构师知识点说起，基础的知识点今天在这里就不写出来了，有需要了解的朋友
2022-02-24 15:49:30
1638
原创 2022年C++后台开发，以我之见
今天趁着过完春节快要回公司工作之际，也马上进入金三银四的时期，谈谈我个人对后台开发的一些个人见解，希望能够对在校的学生或者刚刚接触C++后台开发的同学有点帮助。还记得自己在学校的时候，一直都比较注重的是：编程语言+数据结构与算法。没错，对于一个在校的计算机专业的学生，这是很重要的方面。但是，这往往不够，或许是因为毕业前一直没有进入企业实习，以至于自己在毕业之前，对自己未来的职业规划做得很不够，不知道自己以后会做什么方向，那时候比较宽泛且迷茫的定位是，只要是软件开发的工作，我都OK。毕业后，主要是从事C+
2022-02-08 15:09:00
310
原创 2022年校招丨C++后端如何斩获大厂offer
最近，在知乎上看到了一个问题：讨论一个开发方向，本来就是一个极具争议的话题。就好比和大家讨论：谁是世界上最好的语言一样，个中都有强手。而技术方向也是，每一个方向都存在高薪和出色的公司。01坚持C++还有意义吗？个人认为坚持C++是否有意义需要你自己判定。人生最可贵的是什么？我觉得是陪伴。当你坚持一直用某个技能或一直做某件事的时候，你也会得到你想要的或许会有额外的小惊喜，比如自信心！02现在用C++的公司还多吗？我觉得够多了。像鹅厂的技术栈就一直是CPP，而且很多人误认为只有大厂才
2022-01-20 16:40:51
523
原创 想学习音视频，应该怎么学？如何学习系统性音视频？
目录 为什么要学习音视频？ 如何学习系统性音视频？ 音视频相关的资料 收获 最近有朋友问想学习音视频，应该怎么学，有什么资料吗？这个问题也困扰我很久，几年前就想开始音视频相关的学习，但是一直找不到门道，坚持不过两周。因为越学越发现 不会的知识、需要学的东西就越多。但为什么相比过去几年的几次尝试，这次持续时间更长、不断有文章输出呢？这篇文章就和对自己进行检视反思，希望对想学习音视频的朋友也有所帮助。为什么要学习音视频？我是做android应用开发，a
2022-01-11 20:38:51
263
原创 DPDK的基本原理及学习路线
网络设备（路由器、交换机、媒体网关、SBC、PS网关等）需要在瞬间进行大量的报文收发，因此在传统的网络设备上，往往能够看到专门的NP（Network Process）处理器，有的用FPGA，有的用ASIC。这些专用器件通过内置的硬件电路（或通过编程形成的硬件电路）高效转发报文，只有需要对报文进行深度处理的时候才需要CPU干涉。但在公有云、NFV等应用场景下，基础设施以CPU为运算核心，往往不具备专用的NP处理器，操作系统也以通用Linux为主，网络数据包的收发处理路径如下图所示：在虚拟化环境中，
2022-01-10 15:49:32
667
原创 2022年C/C++开发方向如何选择？或者说C++如何进阶？
前言最近知乎上有这么一个回答，坚持c++还有意义吗？或者说C++如何进阶？在这里讨论c/c++的开发方向的好坏，本来就是一个极具争议的话题。就好比和大家讨论：谁是世界上最好的语言一样，个中都有强手。而技术方向也是，每一个方向都存在高薪和出色的公司。所以这里的讨论分享根据个人的看法和普遍行情做交流。首先就开发方向而言，大致可以分为四大块：嵌入式开发 桌面开发 游戏开发 后端开发一、嵌入式开发嵌入式开发其实可以分为两大类：一类是不带操作系统，一类是针对带操作系统的Linux。
2022-01-06 14:28:27
2094
原创 图解丨Linux内核中锁机制之内存屏障、读写自旋锁及顺序锁
在上一篇博文中笔者讨论了关于原子操作和自旋锁的相关内容，本篇博文将继续锁机制的讨论，包括内存屏障、读写自旋锁以及顺序锁的相关内容。下面首先讨论内存屏障的相关内容。三、内存屏障不知读者是是否记得在笔者讨论自旋锁的禁止或使能的时候，提到过一个内存屏障函数。OK，接下来，笔者将讨论内存屏障的具体细节内容。我们首先来看下它的概念，Memory Barrier是指编译器和处理器对代码进行优化(对读写指令进行重新排序)后，导致对内存的写入操作不能及时的反应到读操作中（锁机制无法保证时序正确）。可能读起来..
2021-12-24 15:33:41
782
原创 图解丨Linux内核中锁机制之原子操作、自旋锁
很多人会问这样的问题，Linux内核中提供了各式各样的同步锁机制到底有何作用？追根到底其实是由于操作系统中存在多进程对共享资源的并发访问，从而引起了进程间的竞态。这其中包括了我们所熟知的SMP系统，多核间的相互竞争资源，单CPU之间的相互竞争，中断和进程间的相互抢占等诸多问题。通常情况下，如图1所示，对于一段程序，我们的理想是总是美好的，希望它能够这样执行：进程1先对临界区完成操作，然后进程2再去操作临界区。但是往往现实总是残酷的，进程1在执行过程中，进程2很可能在此插入一脚，导致两个进程同时对临界区进
2021-12-24 15:20:59
910
原创 图解丨深度解密epoll背后的原理
1 简介Epoll 是个很老的知识点，是后端工程师的经典必修课。这种知识具备的特点就是研究的人多，所以研究的趋势就会越来越深。当然分享的人也多，由于分享者水平参差不齐，也产生的大量错误理解。今天我再次分享 epoll，肯定不会列个表格，对比一下差异，那就太无聊了。我将从线程阻塞的原理，中断优化，网卡处理数据过程出发，深入的介绍 epoll 背后的原理，最后还会 diss 一些流行的观点。相信无论你是否已经熟悉 epoll，本文都会对你有价值。2 引言正文开始前，先问大家几个问题。..
2021-12-20 15:23:28
381
原创 C语言实现协程
C 语言实现协程，最困难的部分就是上下文信息的保存和还原。这样才能够做到，让协程在任意位置让出执行权限，稍后再恢复到中断位置继续执行
2021-12-17 14:55:26
1176
原创 纯C语言|实现协程框架，底层原理与性能分析，面试利刃
协程框架ntyco作者king老师（王博靖）授课地址：纯C语言|实现协程框架，底层原理与性能分析，面试利刃-学习视频教程-腾讯课堂
2021-12-16 16:24:55
227
原创 谈谈协程的作用
笔者是一个菜鸟，以下全部是乱喷的....作用是协程真的改进了IO操作的用户体验。协程是啥首先我们得知道协程是啥？协程其实可以认为是比线程更小的执行单元。为啥说他是一个执行单元，因为他自带CPU上下文。这样只要在合适的时机，我们可以把一个协程 切换到 另一个协程。只要这个过程中保存或恢复 CPU上下文那么程序还是可以运行的。协程和线程差异那么这个过程看起来比线程差不多哇。其实不然 线程切换从系统层面远不止 保存和恢复 CPU上下文这么简单。操作系统为了程序运行的高效性每个线程都有自己缓存C
2021-12-16 15:17:28
565
原创 【音视频技术】播放器架构设计
1 概述首先，我们了解一下播放器的定义是什么 ？“播放器，是指能播放以数字信号形式存储的视频或音频文件的软件，也指具有播放视频或音频文件功能的电子器件产品。” ——《百度百科》我的解读如下：“播放器，是指能读取、解析、渲染存储在本地或者服务器上的音视频文件的软件，或者电子产品。”归纳起来，它主要有如下 3 个方面的功能特性： 读取（IO）：“获取” 内容-> 从 “本地” or “服务器” 上获取 解析（Parser）：“理解” 内容-> 参考 “...
2021-12-10 15:31:46
700
原创 入门音视频流媒体开发看这一篇就够了
总体来讲，音视频开发是有一定的技术门槛的，我觉得至少需要在这个领域踏踏实实积累个3-5年，才能对音视频相关的开发知识有一个整体、深刻的理解。从技术上来讲，需要从如下两个大类知识点上去积累：1. C/C++通用开发知识音视频开发的主要编程语言就是C和C++。这块的专业知识积累是通用的，并不局限于某个特定的行业，属于程序员的技术功底。可以重点关注如下几个方面：计算机系统的底层工作原理操作系统原理程序的编译、链接和加载机制C/C++语言特性背后蕴含的思想，底层工作原理，适用场景，存在
2021-12-07 17:34:14
4016
1
原创 全网最牛的C++11线程池设计与实现（代码资料免费领取）
全网最牛的C++11线程池设计与实现（代码资料免费领取）丨开发中用多线程还是多进程 丨如何使用C++11新特性实现线程池 丨如何实现多参数任务的支持免费学习地址：C/C++Linux服务器开发/后台架构师-学习视频教程高清学习路线地址：Linux C/C++后端服务器架构开发 成长体系更多技术知识点讲解领取：832218493（群）...
2021-11-06 16:54:42
214
原创 6个方面改写你的简历，让你的简历不再业余
6个方面改写你的简历，让你的简历不再业余丨专业技能的技能列表呈现 丨自我评价如何表述 丨项目履历如何专业描述免费学习地址：C/C++Linux服务器开发/后台架构师-学习视频教程高清学习路线地址：Linux C/C++后端服务器架构开发 成长体系更多技术知识点讲解领取：832218493（群）...
2021-11-04 19:42:48
161
原创 布隆过滤器、hyperloglog、分布式一致性丨hash的特性分析
布隆过滤器、hyperloglog、分布式一致性丨hash的特性分析 丨布隆过滤器原理以及应用 丨 hyperloglog原理以及应用 丨 分布式一致性免费学习地址：C/C++Linux服务器开发/后台架构师-学习视频教程高清学习路线地址：Linux C/C++后端服务器架构开发 成长体系更多技术知识点讲解领取：832218493（群）...
2021-11-04 16:42:04
105
原创 【鹅厂T9认证】2022年LinuxC/C++后台开发最强学习路线图
【鹅厂T8认证】2021年LinuxC/C++后台开发最强学习路线图免费学习地址：C/C++Linux服务器开发/后台架构师-学习视频教程高清学习路线地址：Linux C/C++后端服务器架构开发 成长体系更多技术知识点讲解领取：832218493（群）...
2021-11-02 15:58:00
244
原创 6种epoll的设计，让你吊打面试官，而且他不能还嘴
6种epoll的设计，让你吊打面试官，而且他不能还嘴丨单线程epoll的精妙 丨多线程的3种设计 丨蓦然回首还是多进程免费学习地址：C/C++Linux服务器开发/后台架构师-学习视频
2021-11-02 15:52:24
118
原创 4个nginx组件助你丰富简历，增加面试谈资
【免费技术直播分享】4个nginx组件助你丰富简历，增加面试谈资1. 内存池的源码解析2. 线程池的源码解析3. 原子操作CAS的实现4. 共享内存的三种方式上课讲师：King老师上课时间：2021/10/26 20:00上课地址：????https://ke.qq.com/course/417774?flowToken=1017067...
2021-10-26 19:55:51
168
1
原创 Linux内核源码分析
Linux内核源码分析资料分享链接：https://pan.baidu.com/s/1MxbVZAKtDzW_ig1Njvb5Vw 提取码：ho3a链接无效了的话请加Q群：832218493免费领取！免费学习地址：https://ke.qq.com/course/417774?flowToken=1017067
2021-10-23 15:35:22
1368
原创 C++音视频开发的技术要点
总体来讲，音视频开发是有一定的技术门槛的，我觉得至少需要在这个领域踏踏实实积累个3-5年，才能对音视频相关的开发知识有一个整体、深刻的理解。从技术上来讲，需要从如下两个大类知识点上去积累：C/C++通用开发知识音视频开发的主要编程语言就是C和C++。这块的专业知识积累是通用的，并不局限于某个特定的行业，属于程序员的技术功底。可以重点关注如下几个方面：计算机系统的底层工作原理操作系统原理程序的编译、链接和加载机制C/C++语言特性背后蕴含的思想，底层工作原理，适用场景，存在什..
2021-10-22 16:58:22
615
原创 去腾讯面试，5分钟就出来了 ，问的实在是太...
自从加入这家公司，每天都在加班，钱倒是给的不少，所以也就忍了。没想到9月一纸通知，所有人不许加班，薪资直降30%，顿时有吃不起饭的赶脚。好在有个兄弟内推我去了一家互联网公司，兴冲冲见面试官，没想到一道题把我给问死了：如果 A 机器与 B 机器网络 connect 成功后从未互发过数据，此时其中一机器突然断电，则另外一台机器与断电的机器之间的网络连接处于哪种状态？硬是没有答出来，早知道好好看看一大佬给的C++后台开发面试手册了。c++后端开发是一个庞杂的技术栈，因为没有
2021-10-21 16:09:06
572
原创 Linux内核源码分析代码详解
Linux内核源码分析代码详解链接：https://pan.baidu.com/s/1MxbVZAKtDzW_ig1Njvb5Vw提取码：ho3a链接无效了的话请加Q群：832218493免费领取！免费学习地址：https://ke.qq.com/course/417774?flowToken=1017067本系列文章主要是近期针对Linux进程调度源码进行阅读与分析后的经验总结，分析过程中可能结合部分Linux网络编程的相关知识以便于理解，加深对Linux进程调度的理解和知识分享。本系列文
2021-10-20 16:32:23
2058
原创 从事音视频开发，需要学习哪些知识点？
总体来讲，音视频开发是有一定的技术门槛的，我觉得至少需要在这个领域踏踏实实积累个3-5年，才能对音视频相关的开发知识有一个整体、深刻的理解。从技术上来讲，需要从如下两个大类知识点上去积累：C/C++通用开发知识音视频开发的主要编程语言就是C和C++。这块的专业知识积累是通用的，并不局限于某个特定的行业，属于程序员的技术功底。可以重点关注如下几个方面：计算机系统的底层工作原理操作系统原理程序的编译、链接和加载机制C/C++语言特性背后蕴含的思想，底层工作原理，适用场景，存在什么样的问
2021-10-19 17:12:12
1987
原创 C++常见的三种内存破坏的场景和分析
有一定C++开发经验的同学大多数踩过内存破坏的坑,有这么几种现象: 比如某个变量整形，在程序中只可能初始化或者赋值为1或者2, 但是在使用的时候却发现其为0或者其他的情况。对于其他类型，比如字符串等，可能出现了一种出乎意料的值！ 程序在堆上申请内存或者释放内存的时候，在内存充足的情况下，居然出现了堆错误。 当出现以上场景的时候，你该思考一下，是不是出现了内存破坏的情况了。而本文主要通过展示和分析常见的三种内存破坏导致覆盖相邻变量的场景，让读者在碰到类似的场景，不至于束手无策。而对于堆上的
2021-10-18 15:55:22
584
原创 鹅厂打响互联网大厂校招第一枪！
就在昨天，鹅厂率先打破死锁，开启国内互联网大厂校招开奖的第一枪！腾讯2022校招薪资话题冲到了热搜第一了！今年鹅厂校招研发依旧分为 5 档，股票和去年一样，月薪同比去年上调 2k。签字费和去年一样，3w，一次性发放。 腾讯校招档 今年月薪 去年月薪 股票 小白菜 19 k 17k 6w 大白菜 ..
2021-10-15 14:52:36
136
原创 学会了C++往后台方向发展需要学哪些知识点
这张图有点大，由于平台对图片压缩的厉害，如果想要高清版的可以在这个地址中查看：Linux C/C++后端服务器架构开发 成长体系除了学习路线，我还整理了这个过程中学习的大量学习资料，配合上面的学习路线使用：数十位跳槽大厂的面经视频分享2021BATJ等大厂面试题集锦如果你有需要，可以加交流群83218493，我发给你。路线图地址：https://www.0voice.com/uiwebsite/html/courses/v11.4.html整理不易，如果觉得还...
2021-10-12 16:14:36
148
原创 2021C/C++Linux服务器开发学习路线
这张图有点大，由于平台对图片压缩的厉害，如果想要高清版的可以在这个地址中查看：Linux C/C++后端服务器架构开发 成长体系除了学习路线，我还整理了这个过程中学习的大量学习资料，配合上面的学习路线使用：数十位跳槽大厂的面经视频分享2021BATJ等大厂面试题集锦如果你有需要，可以加交流群83218493，我发给你。路线图地址：https://www.0voice.com/uiwebsite/html/courses/v11.4.html整理不易，如果觉得还不错..
2021-10-11 17:25:46
267
原创 腾讯大佬植发三次才学完的路线，你学废了多少？
其实学习路线一类的文章网络上也有不少，但我看了很多，大部分都是罗列了许多的课程和知识点，却缺少一个类似时间轴的东西，告诉大家按照什么样的节奏来推进，所以呢，我希望补上这一个重要的信息。这份学习路线，包含了从新手到工作分阶段所需要学习的内容、详细的知识点、可以参考的书单、电子书资源等等。先给大家看C/C++后端开发的，长文预警，发车~路线图开局一张图，内容全靠编，没错，咱们先来看一张全局图，先从总体上有个宏观的认识。这张图有点大，由于平台对图片压缩的厉害，如果想要高清版
2021-10-09 16:48:52
219
LinuxCC++后台服务器开发面试题
2022-05-14
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人