一、修改训练数据提取代码 _prepro_aistpp.py ,增加读取 blendershape csv 格式数据与音乐特征(n*384)、3d关键点动作(n*24*3)、blendershape 数据(n*52)(本方法只预测 2-54 维的值)
二、修改第一个 vqvae 网络,增加 csv 数据读取、模型输入、loss计算
(1)修改train\test数据集读取方法,增加读取 json 里 csv 数据,及修改 eval 输出方法
(2)修改 数据集读取方法,增加csv输出,修改DataLoader 读取规则
(3)修改 vqvae 网络
(4)修改训练方法
(5)增加测试输出csv 结果代码
三、修改 sep_vqvae_root 网络:
四、修改 motion_gpt 网络
五、强化学习代码并没有增加 blendershape 奖励 :
2303






