系统架构
思考点滴
思考点滴
展开
-
账务实时交易系统设计思考
【思考点滴】作者 : 杨考 微信号 : devin_cn_hd_09_16本文是【讲解篇】和【技术分享篇】结合起来,由于CSDN文章图片丢失,又补了一次图片。 1.概念账务交易主要是指,在资金流发生的时候,需要根据资金的流入和流出情况,对涉及的账户金额进行增加和减少操作,更新资金的时候,同时需要生成相应的账单,以便后续查询和对账等使用。提及账务交易,大家并不...原创 2018-06-21 09:58:09 · 11498 阅读 · 2 评论 -
【一针见血】热点账户
1、热点账户的概念: 热点账户就是在交易过程中,出现频次特别高的账户,交易频次指的是某个时间段的交易频次一直保持在比较高的次数。 如果是数据操作错误重试导致某账户瞬时出现高频操作,则不属于热点账户范畴。2、 热点账户的判别标准 1) 账户每秒有10次以上更新需求 2) 串行化时账户处理延迟高于1秒以上3、当下最常见的几种处理热点账户问题方案举个栗子: 即类似于你...原创 2018-06-22 09:16:37 · 3042 阅读 · 1 评论 -
【手把手教你】电子合同的巧妙设计
作者:杨考 微信 : devin_cn_hd_09_16 欢迎讨论问题在每次收到阅读者添加微信并开始交流讨论,心理是无比的激动。一.背景电子合同向来是各个公司研发人员比较头疼的一个业务。1、电子合同维护的信息很多,且外观表现形式差异很大2、电子合同是一个人工操作的应用,因此后台会产生一堆垃圾或者不合法的输入信息3、电子合同是电子版的,...原创 2018-08-03 18:55:27 · 3261 阅读 · 0 评论 -
【纪念一下】实时用户筛选系统的搭建
作者:杨考 微信 : devin_cn_hd_09_16 欢迎讨论问题在每次收到阅读者添加微信并开始交流讨论,心理是无比的激动。 一. 背景介绍:入职新公司第一周接手日志入库的需求,python工程,边学边开发。终于完成了。第二周腾出人力,开始接手用户筛选系统。用户筛选系统耗时2周+3天完成这短短的18天中,也是入职后的第2周的项目经历。时间紧张到让人怀疑人...原创 2018-08-03 17:25:14 · 490 阅读 · 0 评论 -
【手把手教你】脚本优化实践分享--解放CPU
发发呆原创 2018-06-26 10:41:04 · 809 阅读 · 0 评论 -
账务实时交易系统设计思考-【第六节】-使用建议
【思考点滴】作者 : 杨考 微信号 : devin_cn_hd_09_16本文是【讲解篇】和【技术分享篇】结合起来,由于CSDN文章图片丢失,又补了一次图片。同时进行了章节拆分。 全量版 https://blog.csdn.net/yk200808/article/details/80755459第一节:业务简介 https://blog.csdn...原创 2018-08-13 10:05:16 · 347 阅读 · 0 评论 -
账务实时交易系统设计思考-【第七节】-思考总结
【思考点滴】作者 : 杨考 微信号 : devin_cn_hd_09_16本文是【讲解篇】和【技术分享篇】结合起来,由于CSDN文章图片丢失,又补了一次图片。同时进行了章节拆分。 全量版 https://blog.csdn.net/yk200808/article/details/80755459第一节:业务简介 https://blog.csdn...原创 2018-08-13 10:06:20 · 496 阅读 · 0 评论 -
【小题大做】日志系统设计注意事项【日志并发写入】
作者:杨考 微信 : devin_cn_hd_09_16 欢迎讨论问题在每次收到阅读者添加微信并开始交流讨论,心理是无比的激动。 一、日志系统的需求和设计目标 最基本的需求【下图黑色部分所示】 : 完成日志写入文件,保证无丢失,不影响正常业务,检测写入异常 关注的性能、和衍生需求【下图绿色部分所示】 : 日志的可读性、写入性能、并发写入控制等 终极目标...原创 2018-08-20 17:31:43 · 1828 阅读 · 0 评论 -
【三个臭皮匠】日志处理系统之Hbase优化历程
三个臭皮匠【参与人】: 振远、光鑫和me 一、背景日志收集并入hbase 1、框架2、日志量每日产生数十亿条日志,其中有15%~20%为有效日志,hbase高峰期有效日志的写入QPS为25万/秒。 3、日志过滤80%的日志需要过滤掉【由于特殊性,无法将需要的日志生成到一个指定文件,这里不做过多讨论】 4、机器部署4台机器,kafka80...原创 2018-08-28 21:18:09 · 1573 阅读 · 0 评论 -
账务实时交易系统设计思考-【第五节】-准确性
【思考点滴】作者 : 杨考 微信号 : devin_cn_hd_09_16本文是【讲解篇】和【技术分享篇】结合起来,由于CSDN文章图片丢失,又补了一次图片。同时进行了章节拆分。 全量版 https://blog.csdn.net/yk200808/article/details/80755459第一节:业务简介 https://blog.csdn...原创 2018-08-13 10:04:11 · 395 阅读 · 0 评论 -
账务实时交易系统设计思考-【第四节】-热点问题
【思考点滴】作者 : 杨考 微信号 : devin_cn_hd_09_16本文是【讲解篇】和【技术分享篇】结合起来,由于CSDN文章图片丢失,又补了一次图片。同时进行了章节拆分。 全量版 https://blog.csdn.net/yk200808/article/details/80755459第一节:业务简介 https://blog.csdn...原创 2018-08-13 10:02:50 · 845 阅读 · 0 评论 -
账务实时交易系统设计思考-【第一节】-业务简介
【思考点滴】作者 : 杨考 微信号 : devin_cn_hd_09_16本文是【讲解篇】和【技术分享篇】结合起来,由于CSDN文章图片丢失,又补了一次图片。同时进行了章节拆分。 全量版 https://blog.csdn.net/yk200808/article/details/80755459第一节:业务简介 https://blog.csdn...原创 2018-08-13 09:56:20 · 757 阅读 · 0 评论 -
账务实时交易系统设计思考-【第二节】-业务分析
【思考点滴】作者 : 杨考 微信号 : devin_cn_hd_09_16本文是【讲解篇】和【技术分享篇】结合起来,由于CSDN文章图片丢失,又补了一次图片。同时进行了章节拆分。 全量版 https://blog.csdn.net/yk200808/article/details/80755459第一节:业务简介 https://blog.csdn...原创 2018-08-13 09:59:16 · 1216 阅读 · 0 评论 -
账务实时交易系统设计思考-【第三节】-功能设计
【思考点滴】作者 : 杨考 微信号 : devin_cn_hd_09_16本文是【讲解篇】和【技术分享篇】结合起来,由于CSDN文章图片丢失,又补了一次图片。同时进行了章节拆分。 全量版 https://blog.csdn.net/yk200808/article/details/80755459第一节:业务简介 https://blog.csdn...原创 2018-08-13 10:01:00 · 1565 阅读 · 0 评论