[python] modulespack2

modulespack2

modulespack version2 https://github.com/stephen-song/modulespack2

This is a Framework-Plugin that helps your Web API implement modular calls.

这是一个可以实现子功能模块化的 Web API框架插件

modulespack的设计来源于这样的需求:
很多语音模型并不是端到端进行的,比如传统的ASR就需要先经过声学模型,然后再通过语言模型才能最终得到最终的识别结果,再比如一个训练好的Voice Conversion模型只负责把源语谱图转换为目标说话人语谱图,而前期处理过程(将音频转换为spec)和后期处理过程(将spec转换为音频,也就是Vocoder)是独立于VC的模型进行的,此时如果想要对外提供完整的VC服务,就必须经过这三个子过程,而modulespack要做的就是对这三个子功能进行封装

一个典型的使用modulespack2的程序如下所示:

from session import Session
from graph import ModuleGraph

graph = ModuleGraph(JsonFile='test.json')
sess = Session(ModuleLibPath='D:\pycharm_proj\modulespack2\module\ModuleLib')
feed_dic = {'firstadd':{'x1':1,'x2':2}}

ModuleTable,toposort = sess.build_graph(graph)
result = sess.run(fetches=toposort,ModuleTable=ModuleTable
                            ,graph=graph,feed_dict=feed_dic)

modulespack2借鉴了tensorflow静态图的设计思想,子功能的模块化相当于在计算图中节点化,为此,mp2定义了 ModuleGraph类 来描述节点的集合,同时定义了一种json文件来格式化描述节点与节点之间的数据流动关系。除此之外,mp2还定义了 Session类 来掌控静态图运行的全过程。

以下面这张静态图为例:

其对应的json文件定义在module/GraphLib/RMSE_graph.json文件中

在这里插入图片描述

在modulespack2例程里静态图的执行经历了四个过程:

  1. 首先读取json文件创建graph
  2. 创建session并构建初始节点(节点1 Firstadd)的feeddict
  3. 调用session.build_graph构建运行所需要的资源
  4. 调用session.run执行静态图并返回计算结果

其中session通过调用 build_graph 函数得到该图的拓扑排序和每个节点的module实例

在这里插入图片描述

之后session调用 run 函数根据拓扑排序结果顺序执行每个module

在这里插入图片描述

实例:使用django + modulespack2 搭建的Voice Conversion服务平台
https://github.com/stephen-song/django_with_modulespack2

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值