多轮对话系统

主要包含的模块有：wake up、 ASR 、NLU、 DM 、NLG 、TTS

关键技术：

（1）wake up：匹配到唤醒词后进入工作状态。

（2） ASR：语音转文本。先建立存储语音特征的语音参数模板，对于新输入的语音经过语音特征提取后与模板比较，输出匹配度最高的。有基于模式匹配的动态时间规整法和基于统计模型的隐马尔可夫模型法。

（3）NLU：文本转语义表示。有不需要训练数据的基于规则的方法，直接提取出语义信息；有需要训练数据的基于统计的方法，通过训练网络（如LSTM）的方式分类用户意图。可以两者结合使用，以提高语义表示准确率。

（4）DM：根据NLU的输出，在数据库中比对同时更新有用的信息，决策输出要表达的语义信息。有适用于简单应用场景的穷举的方式，类似数据库查表的方式；有适用于面向特定任务的对话系统的基于框架的方法；有基于强化学习的方式，不断的更新决策策略以最大化reward；有基于浅层神经网络和强化学习结合的方法。

（5）NLG：由DM的输出决策回复的句子。有基于模板的方法，直接将slot信息填入对应的模板句中；有基于模型的方法，可以使用seq2seq和lstm等，来生成回复的句子。

（6）TTS：将NLG生成的句子，用语音的形式输出。文本中的字或词在语音合成库中查询并输出。

 

针对预定电影票的多轮对话系统：https://github.com/xiaoqian19940510/TC-Bot