【TaskMatrix.AI - Visual ChatGPT】连接超大模型和超多API来完成任务

Github项目地址：https://github.com/microsoft/TaskMatrix

目前大规模预训练模型（比如ChatGPT）已经能够完成多个任务，例如

• 提供强大的对话功能，in-context learning能力和代码生成能力
• 生成高层次的解决问题框架

然而，对于特定领域的特殊问题，由于大模型没有见过类似数据的原因导致在这些任务上表现的较差。

另外，对于特定领域的问题，目前也已经有现成的模型或系统做的比较好了，但这些解决特定问题的模型并不容易和大模型适配。

所以为了解决上面两个问题，需要一种结合的机制：

• 大模型提供问题解决的整体方案
• 方案中的子任务使用特定领域的小模型解决

TaskMatrix.AI

微软提出了TaskMatrix.AI，这是一个模型的生态系统，这个系统中大模型作为大脑（brain-like central system），其它小模型作为子任务的求解器（sub-task solvers）。

从深度学习发展的历史来看，目前貌似进入了一个新的时代

TaskMatrix.AI的整体框架如下：