![](https://img-blog.csdnimg.cn/20201014180756930.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
后端
文章平均质量分 95
Shopee技术团队
如何在海外多元、复杂场景下实践创新探索,解决技术难题?Shopee技术团队将与你一起探讨前沿技术思考与应用。
展开
-
MDAP:可观测性数据分析平台设计与实践
MDAP(Multiple Dimension Analysis Platform)是一个多维实时监控分析平台,能够支持业务应用侧自定义指标的监控与分析,并在自定义监控分析能力上,实现了对移动端应用性能数据的专项监控分析能力,以满足业务日益增长的数据监控分析需求。原创 2022-09-10 10:00:00 · 953 阅读 · 0 评论 -
揭露数据不一致的利器 —— 实时核对系统
本文介绍 Shopee Financial Products 团队设计和开发的实时核对系统(Real-time Checking System),它接入简单,只需根据核对需求配置对应的核对规则,实现了规则热加载,并能在不侵入业务的前提下对系统数据进行实时监测对比,及时发现数据的不一致。...原创 2022-06-30 16:26:06 · 952 阅读 · 0 评论 -
Apache Druid 在 Shopee 的工程实践
本文首发于微信公众号“Shopee技术团队”。摘要Apache Druid 是一款高性能的开源时序数据库,它适用于交互式体验的低延时查询分析场景。本文将主要分享 Apache Druid 在支撑 Shopee 相关核心业务 OLAP 实时分析方面的工程实践。随着 Shopee 业务不断发展,越来越多的相关核心业务愈加依赖基于 Druid 集群的 OLAP 实时分析服务,越来越严苛的应用场景使得我们开始遇到开源项目 Apache Druid 的各种性能瓶颈。我们通过分析研读核心源码,对出现性能瓶.原创 2022-02-07 16:40:02 · 818 阅读 · 0 评论 -
Shopee末端物流智能提效之路
本分享将介绍 Shopee 如何基于大数据、人工智能等技术,在东南亚各个市场实现末端物流分拣的自动化、智能化,从而支撑 Shopee 快速发展的最佳实践。原创 2021-12-03 16:17:49 · 1025 阅读 · 0 评论 -
Shopee ClickHouse 冷热数据分离存储架构与实践
本文首发于微信公众号“Shopee技术团队”。摘要Shopee ClickHouse 是一款基于开源数据库 ClickHouse 做二次开发、架构演进的高可用分布式分析型数据库。本文将主要介绍 Shopee ClickHouse 的冷热分离存储架构和支持公司业务的实践。Shopee ClickHouse 的冷热分离存储架构使用 JuiceFS 客户端 mount 远端对象存储到本地机器路径,通过编写 ClickHouse 的存储策略,如同使用多卷存储一样使用远端对象存储。因为我们用同一个 Cl.原创 2021-10-21 14:24:05 · 1189 阅读 · 0 评论 -
如何实现一款毫秒级实时数据分析引擎
本文首发于微信公众号“Shopee技术团队”。业务背景随着 Shopee 业务不断扩张,为了更加了解用户对产品的行为反馈,更好地决策产品特性,各团队内部涌现出大量数据分析的需求。例如:客户端用户行为分析(如跳转行为、页面留存等),业务核心指标分析(购买量、购买品类),甚至于 A/B Test 的结果数据分析,都需要一套数据体系来支撑。而通过传统离线数据产出已然不能满足实时运营、活动投放、异常问题发现等需求。为了支持这些实时数据分析能力,我们团队开发了 Boussole——多维数据实时分析系统,.原创 2021-09-26 10:38:02 · 617 阅读 · 0 评论 -
小游戏如何应对大流量?Shopee Shake的大促实践
本文首发于微信公众号 “Shopee 技术团队”。背景Shopee 每年都会举办几场重要的大促活动。大促过程中,营销小游戏是吸引流量的主要渠道。本文将介绍大促中最常使用,同时在线人数最多的游戏——Shopee Shake——如何应对大促的大流量冲击,保证系统的可用性,为用户提供稳定可靠的服务。1. 游戏与大促每年 Shopee 会在五至十二月的每个大促节点举行电视直播活动。每次大促活动时,各市场的运营人员会与当地电视台合作,在节目直播过程中插入一段玩 Shopee 小游戏的互动环节。.原创 2021-09-13 16:05:18 · 201 阅读 · 0 评论 -
Shopee物流业务核心数据库架构演变——权衡取舍的艺术
本文首发于微信公众号“Shopee技术团队”摘要Shopee 供应链主要覆盖卖家发货后,仓库拣选商品、交至第三方物流(3rd Party Logistics,下称 3PL)、送达买家过程中的各种场景。Logistics Channel Service 项目(下称 LCS)是物流履约链路上连接内外的一环,收拢了向 3PL 下单、获取物流轨迹更新等对外交互的业务。从 2019 年 9 月至今,随着上游系统拆分迁移,越来越多 3PL 进入 LCS 负责范围;并且由于电商业务在 2020 年的.原创 2021-08-30 18:50:13 · 644 阅读 · 0 评论