和青岛大学的计教授有一番交流,聊起聋哑人怎么和一般人交流?聋哑人也有很好的思维,很好的点子,但因为只能在手语交流的范围内,显得有些孤独。
父亲读大学的时候,因为中耳炎导致以后耳聋,父亲过世之前,我曾想爸爸耳朵越来越聋,以后说话没法交流,是否我要和爸爸一起学手语,然后才可以交流。
当和计教授聊起聋哑人交流一事,想起了父亲耳聋怎样交流。于是就有了这个项目的想法。让一般人和聋哑人自然交流。也注意收集一些解决方案,所以,决定把看到的,所想的写下来,供大家参考,互勉共进。
1)硬件方案 (一般人说,聋哑人听)
现在可以将一般人的口语通过NLP技术变成书面语言写在VR/AR的眼镜上,这样聋哑人就能看见,就能明白。
iOS 16 以上版本,苹果12以上手机,可以直接有语音变成文字的功能,这样聋哑人直接可以看。
2)软件方案 (一般人说,聋哑人听)
硬件方案的成本在写更新稿的时候(2022年5月20日 第二版),还是有3000人民币左右,软件方案将是只有20人民币左右,如果能插入广告,可能就是免费的。
a。将一般人的口语通过NLP技术变成书面语言。
b。通过分词,将书面语言的一句话变成一个个单词。
c。在一个模型中,一个单词对应某个国家的手语动作。
d。通过手机的界面,利用虚拟人显示单词从模型中相对应的手语动作。
3)软件方案 (聋哑人表达手语,一般人听)
a。通过人工智能的动作识别将聋哑人的手语,变成书面词汇。
b。将书面单词,连成句子。根据上下文,并用NLP将其优化,变成容易明白的书面句子。
c。 将书面句子,变成语音,一般人就能听。
以上的这些,是我抛砖引玉,这样的思路让大家挑错,改进,从而完善。甚至推倒从来。2022年4月6日周三写下博客供大家茶余饭后思考。2022年5月22日第二版加入苹果iOS16的功能。