滚动测试报告 2022年02月

SpeechIO的所有历史文章可在语音之家网站的【声浪】-【SpeechIO专区】查看,评测结果数据可在语音之家(PC端)的【评测】页面查看。

官网地址:http://www.speechhome.com/eval

滚动测试报告 2022年02月

1、更新日志

最新更新日期:2022-02

2022年02月:

  • 场景:增加[港台口音][老外口音]
  • 流程:文本归一模块加入儿化音过滤功能(贡献者:xiaoxi91@github )
  • 厂商:搜狗平台停止运营;添加 XFZX 服务;微软接口从Rest更换到SDK并关闭TN、脏词过滤模块。
  • 测试:全厂商× 全场景 滚动刷新测试

2021年10月:

2021年7月:

2021年4月:

2021年1月:

  • 场景:增加[体育赛事解说-NBA] [纪录片-篮球人物]
  • 厂商:得到"创业公司S"授权,身份公布为思必驰AISpeech,调用平台为[思必驰开放平台-一句话识别服务]
  • 测试:全厂商 × 全场景 滚动刷新测试

2020年12月:

2020年11月:

2020年10月:

2020年9月:

2020年8月:

2020年7月:

  • 场景:增加 [播客 故事FM]
  • 重要修复:发现 [直播带货 李佳琪薇娅][直播王者荣耀 张大仙骚白][老罗语录]三个场景测试集标注错误,全面检查&修正;作废这三个测试集6月的测试结果,7月开始启用修正后的测试集。详情见本月已经发布的[更正说明文章]
  • 测试:全厂商 × 全场景 滚动刷新测试

2020年6月:

  • 场景:增加 [直播带货 李佳琪薇娅] [直播王者荣耀 张大仙骚白] [老罗语录]
  • 厂商:增加【阿里+】,为阿里云新算法的试用版;测试中取消[谷歌], 因谷歌的中文识别性能没有参考性,且费用超过其余各家之和。
  • 更名:原【搜狗知音平台】改名为【搜狗AI开放平台】
  • 测试:全厂商 × 全场景 滚动刷新测试

2020年5月:

2020年4月:

  • 场景:增加 [鲁豫有约大咖一日行]
  • 厂商:增加【微软 Azure 认知服务】【搜狗知音平台】
  • 测试:全厂商 × 全场景 滚动刷新测试

2020年3月:

  • 项目发布:[引篇] [测试规范]
  • 场景:增加 [新闻联播]
  • 厂商:增加【阿里】【百度】【谷歌】【讯飞】【腾讯】【创Y】

2、滚动测试

已有测试集信息汇总

最新滚动测试结果汇总

最新滚动测试详细数据

3、简评
  • 本季度新增 [港台口音] [老外口音] 场景测试。
  • 厂商及测试也有更新,见开头 changelog 或 [更新说明]
  • 文本归一化中新加入的儿化过滤功能对部分口语化场景数字影响明显,全厂商数字均有相应提升。
  • 本期测试进行了账号全面切换(新身份&新注册),后续测试还会不定期全面更换(因为我们对行业陆续开源了SpeechIO数据成为白盒测试,账号有被定位风险,容易被低成本的定点部署和优化,影响测试公平)。
  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值