- 博客(3)
- 收藏
- 关注
原创 特征平台
特征平台 一、背景 各推荐业务都有相应的特征需求。 特征的生产、上线的质量和效率直接决定了策略和模型的质量和迭代速度。 为了使策略和模型在实际业务场景中发挥更大的效益,需要建设一个好的特征生产和上线的平台。 二、方案设计 1、设计思路 通过实现实时特征预处理配置化、实时特征计算配置化、特征组配置化,实现常规特征1小时内上线 通过构件离线特征公共基础表、实时特征公共基础表,实现基础特征的复用 开发了通用的Count、Sum、List、Set、Max、Min等等特征算子,常规特征无需开发 将
2021-04-26 15:05:31
1893
原创 推荐引擎
推荐引擎 一、背景 假设某个app的首页推荐,有2个策略产品经理、6个算法RD、2个工程RD协同工作,如果没有一套可视化的策略执行流程,沟通将非常低效,且对接容易出错,达不到想要的效果。 其次推荐系统一般可抽象出几个核心流程: 获取用户画像+用户过滤列表 召回 排序 重排 人工运营 这些核心流程可抽成公共组件,配置在流程中,减少很多工作量。 二、方案设计 1、设计思路 打造统一的推荐引擎框架,各环节组件化、配置化 基础组件复用,利用基础组件快速组合上线 推荐流程白盒化,业务方可自行
2021-04-26 14:44:08
395
原创 Hibernate QueryPlanCache引发的JVM内存泄漏
hibernate QueryPlanCache引发的JVM内存泄漏 一、生产环境问题现象 一个经手多人的项目,项目中用到了hibernate作为ORM框架。生产环境中会出现HeapUsage持续缓慢上升的情况,导致出现HeapUsage超过80%的告警(见图1)。 二、问题分析 生产环境dump内存快照(jmap -dump:live,format=b,file=/tmp/dump.hprof...
2020-03-09 21:29:03
1942
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人