该算法平台主要目的是为了方便机器学习和大数据任务的管理,方便用户在服务器集群中间进行数据预处理,模型训练,模型评估,模型管理,脚本管理,数据管理。除了可以给用户提供模型运行记录,模型训练和测试运行情况,输出log等功能外,还可以根据服务器集群资源情况进行任务的合理调度,例如,若近百个服务器都已被使用,资源不够,任务可以等待直到资源足够使用时才运行。
算法平台分为前端网页和后端两部分。我主要负责后端以及后端与前端的接口。
目前算法平台刚上线供集团内部各项业务研发使用,还处于初始阶段,各项功能还有待完善。