字节跳动端智能工程链路 Pitaya 的架构设计

Client AI 是字节跳动产研架构下属的端智能团队，负责端智能 AI 框架和平台的建设，也负责模型和算法的研发，为字节跳动开拓端上智能新场景。本文介绍的 Pitaya 是由字节跳动的 Client AI 团队与 MLX 团队共同构建的一套端智能工程链路。

作者｜覃量

1、Client AI-Pitaya 定位

这些年，随着算法设计和设备算力的发展，AI 的端侧应用逐步从零星的探索走向规模化应用。行业里，FAANG、BAT 都有众多落地场景，或是开创了新的交互体验，或是提升了商业智能的效率。

Client AI是字节跳动产研架构下属的端智能团队，负责端智能AI框架和平台的建设，也负责模型和算法的研发，为字节跳动开拓商业智能新场景。

Pitaya则是由字节跳动的Client AI 团队与 MLX 团队共同构建的一套端智能工程链路，为端智能应用提供从开发到部署的全链路支持。

Pitaya的愿景是打造行业领先的端智能技术，助力字节智能商业化应用。我们通过 AI 工程链路为端智能业务提供全链路支持；通过 AI 技术方案，帮助业务提升指标、降低成本、改善用户体验。

迄今为止，Pitaya端智能已经为抖音、头条、西瓜、小说等应用的 30+场景提供了端智能支持，让端智能算法包在手机端每天万亿生效次数的同时，错误率控制在不到十万分之一。

2、Pitaya 架构

在这一节我们来详细介绍一下Pitaya架构的两个最核心的部分：Pitaya平台和Pitaya SDK。

• Pitaya 平台为端上AI提供了工程管理、数据接入、模型开发、算法开发和算法包部署管理等一系列的框架能力。在端上算法策略开发过程中，Pitaya 平台支持在AB平台对端智能算法策略进行实验，验证算法策略的效果。除此之外，Pitaya 平台还支持对端上AI的效果进行实时的监控和告警配置，并在看板上进行多维度的分析与展示。
• Pitaya SDK为端智能算法包提供了在端上的运行环境，支持端上AI在不同设备上高效地运转起来。Pitaya SDK同时还支持在端上进行数据处理和特征工程，提供了为算法包和AI模型提供版本和任务管理、为端上AI运行的稳定和效果进行实时监控的能力。

3、Pitaya 平台

3.1 Pitaya Workbench

*MLX: 字节通用机器学习平台

*L