- 博客(5206)
- 收藏
- 关注
RSS订阅转载 MySQL亿级数据平滑迁移实战
作者：来自 vivo 互联网服务器团队- Li Gang本文介绍了一次 MySQL 数据迁移的流程，通过方案选型、业务改造、双写迁移最终实现了亿级数据的迁移。一、背景预约业务是 vivo 游戏中心的重要业务之一。由于历史原因，预约业务数据表与其他业务数据表存储在同一个数据库中。当其他业务出现慢 SQL 等异常情况时，可能会直接影响到预约业务，从而降低系统整体的可靠性和稳定性。为了尽可能提高系统的稳...
2024-09-05 11:51:00
397
转载 变天了！强烈建议今年拿下软考！
????2024下半年各地软考报名已经开始，官宣11月就开考，备考时间仅剩2个月❗️❗️奉劝大家现在就准备，务必今年拿下软考证书????如果还没有明确备考规划，分享一个免费，且有超多干货的【软考通关秘籍课（24新教材版）】????????✅免费听：备考问题诊断+通关规划；✅ 全程练：各科高频考点+考前冲刺；✅ 免费拿：真题解析/论文模版/应试技巧；当前听课条件：所有计算机行业技术人才、不集赞、不转发、不花一分钱！今年，...
2024-09-05 11:51:00
178
转载 字节开始卡学历了
字节最近，有不少大厂陆续开启校招。当中就包括宣布今年有 4000+ 研发需求的国内大厂字节跳动。但也是近期，不少同学发帖表示，投递字节，遭受了各种挂。这位同学是山西大学（双一流）毕业生，据这位同学提供的截图，在8月1日投递了后端、测开和 C++ 几个岗位，在8月2日便显示流程终止。这种情况显然连初筛都没过，不少同学猜测：字节开始挑学历了。也有同学在评论区指出，可能是日常实习不缺人，根本没有 HC，...
2024-08-30 22:07:43
1608
转载 无敌了！强烈建议所有架构师今年拿下软考！
注意注意！????分享一个免费，又干货满满的2024软考备考通关交流群！进群听课免费领1⃣️2天软考大咖公开课2⃣️2024最新软考备考提分资料包3⃣️7天1V1备考指导+考试专业选择4⃣️历年真题库+核心必考点+万能通关技巧软考证书作为计算机行业公认的王牌认证，近几年每年都有上百万人报名。而其中的软件架构设计师和软件设计师则是技术领域含金量最高的两个科目，对于研发、测试、产品、运维岗位的同学来说，是精...
2024-08-17 11:41:01
164
转载 高并发系统的艺术：如何在流量洪峰中游刃有余
01前言理解，首先 MCube 会依据模板缓存状态判断是否需要网络获取最新模板，当获取到模板后进行模板加载，加载阶段会将产物转换为视图树的结构，转换完成后将通过表达式引擎解析表达式并取得正确的值，通过事件解析引擎解析用户自定义事件并完成事件的绑定，完成解析赋值以及事件绑定后进行视图的渲染，最终将我们经常会说互联网“三高”，那什么是三高呢？我们常说的三高，高并发、高可用、高性能，这些技术是...
2024-08-17 11:41:01
130
转载 教育领域大模型技术与应用
导读苏喻博士，高级工程师，合肥人工智能研究院副研究员，原科大讯飞AI 教育研究院副院长，中国科学技术大学博士后，安徽省青少年信息学教育专委会秘书长，CCF 大专委-通讯委员，合肥市 D 类人才。苏喻博士一直在智慧教育方向深耕，聚焦于青少年编程。面对数据稀疏和学习效果延时性问题，苏喻博士团队在教育领域大模型的研发中，技术上有如下三个方面的亮点：1）通过对偶数据的模型训练与评估和历史经验注入实现青少...
2024-06-26 11:50:14
390
转载 取代后端岗，中国又一新兴岗位在崛起！这才是程序员未来5年最好的就业方向！...
如果你问：2024年，程序员必须掌握哪项技术？AI一定是榜首！从去年起，AI大模型已是程序员的必备工具——编程提效：编写更快，程序更稳定；代码更优：测试数、BUG对应减少；项目爆单：训练模型，接&做项目更快；输入prompt指令和搭建AI大模型开发框架，AI就能迅速批量完成工作，甚至比人工更出色。知名大厂都在布局AI市场，懂AI的程序员年薪甚至翻到80w...
2024-06-26 11:50:14
220
转载 腾讯新闻推荐架构升级：2 年、 300w行代码的涅槃之旅
????目录1 前言2 腾讯新闻业务介绍3 新闻推荐架构升级的背景4新闻推荐架构升级的目标和演进路线5架构升级的关键路径6系统防劣化7总结程序员最大的幸福是看到自己的代码跑在千万人的设备上，程序员最大的不幸是去维护千万人设备背后的老代码。腾讯新闻，是一个有着十多年历史、海量用户规模的经典业务，其背后的系统走过了门户时代，走到了推荐算法时代。随着时间的推演，老旧架构面临着那些经典的问题：可用性差，...
2024-06-18 15:10:24
263
转载 春晚直播稳定性保障实践
每年的央视春晚直播，是对爱奇艺直播链路上所有技术团队的一次大考。央视春晚除了会引起服务接口QPS的暴涨，也会对CDN带宽和核心机房带宽带来瞬间的压力。此外，直播对线上故障处理时间的要求特别高，因此直播链路上的各个环节都要做好充分的高可用性保障。整个直播链路，大致可以分为信号编码与切片处理、CDN分发与回源、节目播放请求处理、视频切片下载与播放四个环节。本文分别介绍这四个环节在2024央视春晚中的稳...
2024-06-16 14:18:16
210
转载 最近，后端的薪资爆了。。。
国内AI赛道又爆了！继科大讯飞、阿里、华为等巨头公司发布AI产品后，很多中小企业也陆续进场！人才市场上AI大模型工程师“一将难求”！甚至开出80k*16的高薪，挖掘AI大模型人才！如今大厂老板们，也更倾向于会AI的人，普通程序员，还有应对的机会吗？与其焦虑……不如成为「掌握AI工具的技术人」，毕竟AI时代，谁先尝试，谁就能占得先机！????知乎知学堂特邀你加入：行业前沿资源——AI大模型公开课已为本...
2024-06-02 11:50:55
164
转载 Git还能这样用？一文看懂Git最佳实践！
????目录1 什么是 git2 什么不是 git3 选对工具4尽量在本地5分支策略6Merge 还是 rebase7处理合并冲突8不要 pull，要 fetch9小而完整的 commit10LFS 技巧11Git 的缺点12 总结很多 Git 的操作，都有多种方法达到目的，但其中往往只有一种方法是最佳路径。Git 是个超级强大也非常流行的版本控制系统（VCS）。它的设计理念和其他VCS...
2024-06-02 11:50:55
158
转载 各位，请做好3年内随时可能失业的准备！
2024，国内首位AI程序员上岗，垂类大模型应用已经到了井喷期如果你不懂AI，下岗可能性只会越来越大！如今，百度、京东、华为等科技互联网巨头纷纷加快布局人工智能技术和市场，AI大模型人才招聘年薪有80W-96W招聘需求：精通业务：兼具产品/数据思维技术过硬：懂AI大模型新技术能带团队：技术过关且带团队未来懂AI程序员不仅不会被裁，收入还能更高！！作为普通程序员，如何学会运用AI大模型，成为大厂争抢...
2024-04-27 11:40:20
217
转载 一次接口的性能优化之旅
Tech目录引言现状诊断问题定位以及性能优化最终效果和未解决问题总结01引言在今年的敏捷团队建设中，我通过Suite执行器实现了一键自动化单元测试。Juint除了Suite执行器还有哪些执行器呢？由此我的Runner探索之旅开始了！在项目开发过程中，我们经常会遇到接口响应慢的问题。这不仅影响了用户体验，还可能降低了系统的吞吐量。为了提高接口性能，我们需要对整个系统进行全面的优化，包括代码层面、数...
2024-04-27 11:40:20
208
转载 一文搞懂七种基本的GC垃圾回收算法
????目录1 为什么要有 GC2 GC 相关的基本术语3 常用的 GC 算法4七种 GC 算法的对比分析5 总结本文整理了七种常见 GC 算法的基本原理，包括 GC 标记-清除法、引用计数法、GC 标记-复制算法、GC 标记-压缩算法、保守式 GC、分代垃圾回收、增量式垃圾回收(三色标记法)，可以作为学习 GC 知识的框架。本文主要是中村成洋、相川光写的《垃圾回收的算法与实现》一书的读书笔记，没有输...
2024-04-14 11:50:26
222
转载 4月，一个新方向爆了，96k很稳...
重磅消息，国资委打响了国内AI第一枪！宣布央企将把发展AI放在全局统筹地位上，并加快建设一批智能算力中心。这意味着传统行业又迎来了一次大洗牌，这个过程需要大量AI人才！！现在国内头部人工智能公司已经开始用AI数字人助力各行各业，央企+交互数字人将成今年一整年的趋势。除此之外，知名大厂也都在布局AI市场。懂AI的程序员年薪已经翻到80w-96w。风口之下，与其焦虑被行业淘汰，不如先人一步掌握 AI ...
2024-04-14 11:50:26
207
转载 今年请做好失业准备，开始存钱吧
大家期待的经济繁荣，没有来。往年的跳槽涨薪，也没有来。来了的，是大公司裁员的消息频频爆出。真的，不知道哪一天，失业就是一夜间的事。可能你不相信，其实更多的，是你不愿意相信。2008年的时候，也没人会相信诺基亚会消失。悲剧在有些人身上重复上演，就是因为他们不愿意相信。所以我劝大家，这个时候一定要给自己提前谋出路，多一手准备。很多朋友也都跑来问我，如果真是这样，他们能提前做哪些准备？之所以跑来问我，是...
2024-04-09 11:40:54
189
转载 用户画像算法：历史、现状与未来
导读今天分享的主题是用户画像算法，力求从一个更加宏观的视角讲述用户画像算法整体的发展历史、现状与未来。主要包括以下五大部分：1.用户画像简介2.基于本体论（Ontology）的传统用户画像3.画像算法&深度学习4.总结与展望5.Q & A分享嘉宾｜傅聪博士Shopee（新加坡） 电商搜索算法专家01用户画像简介画像是一种人类可理解的、机器可读写的，对用户的结构化描述...
2024-04-09 11:40:54
460
转载 紧急通知‼软考官方最新公布！全体程序员开始狂欢吧！
随着国家计算机与软件技术的发展，每年报名参加计算机软件资格考试（简称：软考）的人越来越多。据工信部新闻发布会消息：????2023年有超500万人都在考软考，报名人数较2020年直翻10倍。据悉，国内持软考证书的IT人才缺口高达950万，持软考证书的全职IT人才平均年薪可达20-50万元。前几天，软考官方公布了24年软考大改革，即技术类科目变多了！这意味着，市场急需持有软考证书的IT人才，且今年改革第一...
2024-03-30 11:50:53
212
转载 十年前的微信消息收发架构长啥样？
????目录1 背景2 消息收发架构3 消息防丢失机制4 总结2023 年，微信及 WeChat 的 DAU（月活用户）达到 13.4 亿，微信已经是很多人工作、生活中不可或缺的一个环节。从 2011 年 1 月 21 日上线至今，微信已经走过了 13 个年头，其背后的技术基座与架构也发生了巨大的变化。这些变化背后，所折射的也正是中国互联网高速发展的黄金年代。腾讯云开发者社区特别策划了「十年前的技术」系...
2024-03-30 11:50:53
175
转载 美团大规模KV存储挑战与架构实践
KV 存储作为美团一项重要的在线存储服务，承载了在线服务每天万亿级的请求量，并且保持着 99.995% 的服务可用性。在 DataFunSummit 2023 数据基础架构峰会上，我们分享了《美团大规模 KV 存储挑战与架构实践》，本文为演讲内容的整理。文章主要分为四个部分：第一部分介绍了美团 KV 存储发展历程；第二部分分享了内存 KV Squirrel 挑战和架构实践；第三部分阐述了持久化 K...
2024-03-25 11:40:44
200
转载 裁员了，很严重，大家做好准备吧！
近来，有消息爆出某大厂开年又要裁员、降薪了而作为席卷全球的新概念ESG近来真的是火爆了整个互联网圈也已然成为当前各个行业关注的最热风口“ESG岗位月薪炒到15万”的话题更是不绝于耳当前，国内官方发布了一项ESG新证书含金量五颗星、中文ESG证书、完整ESG考试体系、名师主讲...甚至在圈内成为大佬们的热门话题当前各大厂裁员又降薪下大家还是要多留一手准备冲一冲这个新兴领域...一、什么是ESG？如何...
2024-03-25 11:40:44
174
转载 真心建议大家搞个香港身份，再不冲就晚了！
香港一直有“互联网荒漠”之称，疫情这三年，香港开始大力扶持互联网 科技工程 /IT产业，公布了《香港智慧城市蓝图》。目前规划已经覆盖到交通、医疗、经济、教育、环境等多个方面。目前在智能制造，5G网络、智慧城市等领域人才，通过香港优才计划入境都极具优势。什么是香港优才计划优才计划，全称优秀人才入境计划，香港政府于2006年2月公布，是一项设有配额的移民吸纳计划，旨在吸引高技术人才和行业优秀人才来港定...
2024-03-21 11:40:14
173
转载 如何画好一张架构图？
????目录1 架构图的目的2怎样的架构图是好的架构图3 什么时候画架构图4 架构图分类5 如何画架构图6业务/产品架构图7应用架构图8技术架构图9代码架构图10 数据架构图在上一篇文章《4款亲测好用的开发画图工具》中，有读者在后台留言提到想了解如何画好一张架构图？本文作者从架构图的目的、怎样的架构图是好的架构图、如何画好架构图，以及各类经典架构图的分类和示例都做了详尽解析，是一篇不可多得的干...
2024-03-21 11:40:14
192
转载 变天了！软考官方正式明确！全体程序员开始狂欢吧！
2024年适合IT人才的“一举三得”的全方位职业提升方式终于出现了！！！如果你想实现个人技术全体系提升，实现升职加薪！如果你想胜任技术管理岗位，实现职业延伸！如果你想在工作之余做些副业，实现收入增长！那么我强烈推荐你考取一个软考证书。高级推荐：系统分析师/系统架构设计师中级推荐：软件设计师这种考试既是职业资格考试，又是职称资格考试。取得软考高级资格可聘任高级工程师职务，有了系统分析师证书就具备了评...
2024-03-19 11:41:04
181
转载 揭秘百度数仓融合计算引擎
作者|Spark源码践行者导读introduction本文介绍了百度数仓融合计算引擎的整体设计原理、优化及实践，阐述了在互联网产品快速迭代的趋势下，基于一层数仓宽表模型的数仓模型如何做到数十秒级查询的技术方案，并从互联网业务变化特性、传统计算引擎存在的问题、融合计算引擎的原理及优缺点、引擎应用场景和效果等角度进行了较为全面的分析，最终通过引擎设计和优化实现了提升查询性能的同时节约数仓存储的目...
2024-03-19 11:41:04
169
原创 从大厂降薪来国企，年终奖只有970元，给我气笑了！
现在舆论都说国企好，但从互联网跳到国企真有那么好吗？一位从大厂降薪跳到国企的网友吐槽：七月从大厂降薪来国企，工作是轻松了，年终到账970元，给老子气笑啦，不如不发，侮辱性极强。同行采访实录工作半年，年终奖970元，这是正常的吗？我们采访了几个同行，听听大家怎么说：1.有人说，这么少，以为自己看错数了呢。2.有人说，这不是年终奖，这是过节费吧？3.有人说，是不是没给领导敬酒？4.有人说，看看能不能打...
2024-03-13 21:10:08
502
转载 vivo 海量微服务架构最新实践
作者：来自 vivo 互联网中间件团队vivo微服务平台为全球5亿+用户背后的全网十万级机器、万级微服务提供服务，在高效实践过程中，vivo中间件平台团队输出了一套业务适用的微服务架构最佳实践--架构能力矩阵、高效的开源中间件组件全生命周期管理策略，走出了一条从开源到开源+自研的技术演进路径，通过微服务引擎升级和统一平台建设较好解决了面临的问题与挑战。一、vivo 从 0 到 1 的微服务架构工程...
2024-03-13 21:10:08
134
转载 扯淡的DevOps，我们开发根本不想做运维！
导读在软件开发领域，DevOps的理念已经越来越普及，但在实际应用中，却存在着不少争议和误解。本文将从开发者视角出发，质疑DevOps在实际开发过程中的可行性，分享开发人员对于运维工作的真实想法。让我们一起来看看，究竟是什么原因让开发者对DevOps产生抵触情绪，以及如何化解这一矛盾。阅读本文，你将获得对DevOps更深入的理解，以及找到提高开发与运维协作效率的启示。01引言在今年的敏捷团队建设...
2024-03-07 11:40:49
130
原创 怀孕期间leader逼我辞职，恶意增加工作量导致流产！休完小产假就要辞退我，绩效给D！...
女性在职场上会遇到多大的恶意？一位女网友讲述了自己的遭遇：怀孕期间，leader让我自己提辞职，我没答应。每天各种工作量，压力大，最后胎儿没保住，刚休完小产假就跟我说要解除合同，给我n+1，年底考评还给我评D。我不同意n+1，要求2n，绩效也申诉了，没结果。现在不跟我谈了，直接安排工作，每天邮件安排工作，各种挑刺。请问大家这种有什么风险吗？我不答应n+1也是因为工作太憋屈了，最高是能赔偿2n的。现...
2024-03-06 20:37:39
500
转载 画像标签体系构建与应用实践
导读本次分享题目为画像标签体系构建与应用实践。主要介绍以下几个部分：1.画像标签体系2.画像标签平台3.常见算法类画像4.画像标签应用场景5.问答环节分享嘉宾｜周元炜 去哪儿网 数据挖掘高级经理01画像标签体系去哪儿在每个业务发展过程中构建了独立的画像标签体系。随着公司的不断壮大，需将各个业务的画像标签体系进行整合。从技术角度看，整合的过程相对简单，但业务层面的整合则较为复杂。因为各...
2024-03-06 20:37:39
209
转载 架构探索之ClickHouse
导读ClickHouse是一款开源的列式数据库管理系统，适用于在线分析处理（OLAP）场景，本文通过介绍ClickHouse，帮助读者今后快速地处理大规模数据，并获得实时的分析结果，为业务提供有力支持。01前言在今年的敏捷团队建设中，我通过Suite执行器实现了一键自动化单元测试。Juint除了Suite执行器还有哪些执行器呢？由此我的Runner探索之旅开始了！架构，软件开发中最熟悉不过的名词...
2024-02-27 11:40:29
129
转载 年薪96w！真心建议大家冲一冲新兴领域，工资高前景好
AI界最新成果炸裂！AI 技术已经能理解和模拟现实世界，AGI（通用人工智能）又向前迈了一大步！“苹果”替代“诺基亚”的时代又要来临了！！2年内，传统 IT 岗位将失业被重塑！5年内，医疗/量化/互联网/办公等行业涌现新业态现在还不学习AI大模型训练技术或将很快面临“被淘汰”！作为普通程序员，如何不被时代抛弃，享受AI技术带来的红利？！????知乎知学堂特发起：行业前沿资源——AI大模型公开课已为本...
2024-02-27 11:40:29
146
转载 恭喜了！全体架构师彻底狂欢吧！这个好消息来得太及时！
自2003年10月18日起人事部、原信息产业部印发《全国计算机软考考试暂行规定》，将计算机软件资格考试（简称：软考）纳入全国专业技术人员职业资格证书制度统一规划！软考从传统的“技能考试”上升为“国家级考试”。软考证书热度持续上升????！23年软考报名人数超500万，相比20年报名人数直接翻了10倍；国内持软考证书IT人才缺口高达950万，每年存在200万人的供需差；一线城市持软考证书IT从业者平均工资...
2024-02-25 11:40:39
209
转载 有效降低数据库存储成本方案与实践
导读在互联网行业降本增效的大背景下，如何治理成本投入重灾区——数据库（Mysql）成为了开发人员眼中的头等大事，本文介绍了降低数据库成本的方法与思路，并且介绍了在实践过程中需要着重关注的风险点与抵御风险的措施。01背景在今年的敏捷团队建设中，我通过Suite执行器实现了一键自动化单元测试。Juint除了Suite执行器还有哪些执行器呢？由此我的Runner探索之旅开始了！随着平台的不断壮大，业务...
2024-02-25 11:40:39
171
原创 网曝浦发银行不发年终奖，只发一封家书，员工吐槽“家书抵万金！”
为了少发点年终奖，个别公司真是无所不用其极啊。最近有网友爆料浦发银行不发年终奖，只给员工发一封家书。某浦发员工吐槽，“两天无法平静，百日攻坚连三月，一封家书抵万金。”还有员工表示，“终于体会到家书抵万金的沉重感，这份家书对不起日夜加班，工作占据大部分时间，生活都靠家属来扛的一线员工。”还有人嘲讽，“要是搞业绩有这样的心思，不愁浦发发展不起来。”还有内部员工亲自出来辟谣，不是年终奖，是12+12的工...
2024-02-24 11:47:57
490
转载 高效开发与设计：提效Spring应用的运行效率和生产力
导读随着Java开发者社区对Spring框架的深入使用，我们越来越认识到在大型应用中，启动速度和性能优化的重要性。本文将深入探讨如何通过专业分析和优化技术，显著提升Spring应用程序的启动速度和运行性能，解决了开发过程中的效率瓶颈和线上服务的快速扩容需求。01引言在今年的敏捷团队建设中，我通过Suite执行器实现了一键自动化单元测试。Juint除了Suite执行器还有哪些执行器呢？由此我的Ru...
2024-02-24 11:47:57
156
转载 开源大数据 OLAP 的思考及最佳实践
导读本文将介绍开源 OLAP 及其在不同场景下的需求。文章将从 EMR 的角度，简要介绍 OLAP 的数据架构。并重点讲解 StarRocks 的核心功能和后续发展规划。本次分享主要分为以下五个部分：1.开源 OLAP 综述2. OLAP 场景思考3.开源数据湖/流式数仓解决方案4.StarRocks 介绍5.未来规划分享嘉宾｜周康阿里云技术专家01开源 OLAP 综述近年来开源...
2024-02-20 11:40:49
193
转载 开年就这情况，大家今年还是多做准备吧！
2024年了，大家期待的经济复苏并没有来，“裁员潮”却已然到来：2月14日：思科宣布裁员约4300人！1月25日：微软宣布2024年度将裁员1900人！1-2月：阿里旗下电商Lazada宣布计划裁员2000人！这些是年初已发布了官方消息的大厂裁员信息，紧随其后的尚未被官方证实的可能还有小米、阿里、腾讯、字节跳动等。真的，不知道哪一天，失业就是一夜间的事，今年我已经接到了太多粉丝的私信：其实，我很能...
2024-02-20 11:40:49
172
原创 2024年上的第一当：公司说公积金10％，结果竟是个人交5％，公司交5％！
公积金10％是什么意思？正常人都会以为是个人和公司各交10％，但有公司却说是个人交5％，公司交5％！一位网友就遭遇了这样的奇葩解释，他气愤难耐，称之为“新年第一当”：下面是他和hr的聊天记录：同行采访实录这样的公积金比例计算方法，同行们怎么看？我们采访了几位互联网从业者，大家这么说：1.有人说，好家伙，这简直是糊弄人。2.有人说，还能这么算，长见识了。3.有人说，这hr就纯纯的大骗子，公积金哪有这...
2024-02-19 17:39:04
836
转载 6 个技术点带你理解 Kafka 高性能背后的原理
Kafka 是一款性能非常优秀的消息队列，每秒处理的消息体量可以达到千万级别。今天来聊一聊 Kafka 高性能背后的技术原理。1 批量发送Kafka 收发消息都是批量进行处理的。我们看一下 Kafka 生产者发送消息的代码：privateFuture<RecordMetadata>doSend(ProducerRecord<K,V>record,Callback...
2024-02-19 17:39:04
138
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人