2017双十一珠峰算法框架&Hierarchical中控算法

一.背景

2017珠峰项目是阿里巴巴集团在双十一战略决策上的重要项目，也是供应链和商业化结合的典型项目。通过智能供应链系统对商家销售能力、货品承接能力和用户购买需求进行精准预估，结合多层级的中央控制算法进行多维度的流量调控，使得平台整体流量利用率和转化率最大化的基础上，给予商家和核心商品一定的流量激励和扶持，同时调动商家参与和平台互动，建立双侧珠峰机制，形成共赢。

淘系平台有琳琅满目的流量渠道，其中一部分是公域流量，包括搜索、推荐、广告、会场、营销平台等，另一部分是私域流量，主要来自于店铺内。通常情况下，不同渠道之间相互独立，算法会根据自己的业务场景设计相应的目标函数和算法模型进行效率和体验上的优化，但是场景与场景之间流量协同无法通过优化单一场景来完成。

“珠峰”项目致力于打造一个公域渠道下的流量管理平台：
(1)在个性化背景下用柔性精准的算法调控保障商家的流量确定性；
(2)与供应链深度打通，将行业核心入仓货品基于销售计划做前后端流量协同；
(3)商家参与闭环建立，由单侧珠峰升级成双侧珠峰，充分调动商家的主观能动性。

二.珠峰算法框架

在介绍中控系统之前，首先介绍一下珠峰算法框架：

今年珠峰第一个突破是将珠峰选品和供应链系统深度融合，并且引入了销售计划的概念，将双11当天的目标拆解到预售、预热和售卖期三个阶段，极大程度缓解了双十一当天的压力。首先卖家GMV预估和目标计划模型给卖家中控系统提供了可靠的信号输入，对双11珠峰大盘节奏把控起到了至关重要的作用（Manhattan商业化项目之卖家双十一GMV预估）；今年新引入的主推款商品挖掘与供应链系统打通，不仅为商品中控系统和商品调控系统奠定了基础，同时还影响到了行业决策和商家备货，是珠峰商业闭环模式下不可或缺的一部分（Manhattan商业化项目之双十一主推款预测）；商品销量预测在主推款挖掘的基础上实现了选品、目标计划、缺货限流等功能，大大提高了商品调控Plan和货+仓调控Plan的完成率和整体效率，是珠峰高维立体调控体系中的核心决策系统之一（Manhattan商业化项目之双十一销量预测）。
今年珠峰第二个突破是Hierarchical中控体系的设计。在珠峰卖家中控层上游增加了主推款商品中控层，既保证了卖家整体目标的最优化分配和珠峰大盘目标的过程控制，又能够对核心货品流量进行差异化管理；在珠峰卖家+商品的精准计划的基础上，又增加了KA以上层次的柔性信号输入，形成了从珠峰核心商品层到珠峰卖家层再到KA-SKA-GSKA层的Hierarchical分层中控框架。
今年珠峰第三个突破是Plan与RL结合的高维立体调控体系。今年双11的Plan系统在TPP平台实现了基于抗积分饱和PID控制器的多线程并发框架，支持了卖家和商品调控Plan的过程控制，并且采用了基于Druid引擎的实时数据查询接口，将卖家Plan的一个PID采样周期从开始的10分钟缩短到了30秒以内，大大提升了控制精度（实时交互式大数据服务双11总结）；而今年在基于Plan的精准调控的基础上，引入了基于强化学习的柔性调控，减小了基于Plan调控带来的瞬时损失，同时能够更快的收敛到新的局部最优解（基于强化学习的分层流量调控）。
今年第四个突破是从单侧珠峰到双侧珠峰。在算法上的双侧指的是整个珠峰的反馈系统采用了新的正交AB分桶算法，使得搜索和推荐能够在统一的正交分层上进行AB测试；在商业上的双侧指的是优惠券权益联动、货品供应链融合、工具中枢到行业指导再到卖家参与的商业闭环机制等等。

珠峰系统中，卖家调控计划的框架图如下：

其中中控系统是整个框架的中转站，上游承接了基于销量预测和目标计划的决策系统，中间和工具中枢系统进行交互和Plan传递（2017双十一珠峰技术大练兵之工程篇），在下游对接调控系统，实现各个渠道的流量调控。

三.中控算法

珠峰是一个商业价值与流量价值相辅相成的项目，虽然公域流量下调控渠道占比有限，但是控制的都是全网效率较高的核心流量，通过这些渠道下的用户行为间接影响着全网大大小小的场景、同时还将流量直接或间接引导到了私域渠道，更重要的是通过这些核心流量对商家形成激励，带动更多的商业信号注入和权益资源倾斜，形成商业闭环模式下的双侧珠峰。因此珠峰更像是一种杠杆效应，以有限的流量作为撬动大盘的钥匙。

中央控制算法是对商家和核心商品的销售计划、流量承接能力（IPV价值）进行预测，提前判断商家和核心商品的目标规划是否合理，完成整体目标是否有风险，同时将商家和核心商品的目标在各个渠道进行全局效率最优的动态规划，在兼顾珠峰整体目标、商家目标、核心商品目标的同时，给予部分商家和商品流量激励。

中控系统的主要算法模块包括流量进度控制算法、实时IPV价值预估算法、中控分配算法、流量收敛控制算法、流量止损控制算法，下面将会对中控主要算法进行详细介绍。

1.流量进度控制算法

流量进度控制算法分为渠道流量进度控制和小时流量进度控制两部分࿰