闲鱼商品理解数据分析平台——龙宫

引言

闲鱼是一个以C2C为主的平台，区别于B端的用户，C端卖家在发布商品时更倾向于图+描述的轻发布模式，对于补充商品的结构化信息往往执行力和专业程度都不高，这为我们的商品理解带来了很大的困难。为了能够在发布侧获得更多的商品结构化信息，我们开始尝试在原有图+文的极简发布模式中加入商品关键属性的补充选项，事实证明，适当的结构化属性选项并不会影响用户的发布体验，却能极大地提升我们对商品理解的能力。然而存在以下问题：
在设定结构化属性选项时，往往强依赖行业运营的经验，缺少实时的、多维度的数据分析手段。虽然离线产出的数据报表能够在一定程度上统计某些关键指标，但对于精细的、个性化的数据查询需求，离线报表扩展性和性能都不足。
基于上述问题，我们搭建了龙宫数据分析平台。

龙宫数据分析平台的定位与总体框架

区别于数据报表，我们在设计龙宫数据分析平台时主要考虑了以下方面：

• 实时性要求，当运营上线新策略或因服务问题线上出现数据波动时，我们希望能够实时地分析出结构化类目属性在这段时间内的覆盖情况，以帮忙运营做进一步的决策。

• 多维度要求，闲鱼目前拥有8000+的叶子类目，不同行业运营的侧重点各不相同，数据分析平台要能够满足个性化的数据分析需求。

• 数据管理要求，闲鱼的类目属性、SPU数据、运营策略需要一个统一管理的地方。

我们希望以此实现结构化数据对运营的反哺，构成商品结构化数据生产与应用的闭环。

总体分层框架如下：