厦大进一步研发智能语音系统:实现普通话闽南话无障碍交流

厦视新闻 2022-10-24 19:37:25

2022-10-24 19:37:25

闽南话被称为“最难学的方言之一”。近日,国外互联网企业家马克.扎克伯格的一段视频在网上引起了大家的关注,视频中,扎克伯格展示了最新的AI翻译技术,可以实现闽南话和英语的无障碍交流。事实上,早在2019年,来自厦门大学的科研团队就推出了会听、会说、会写的闽南话智能语音系统。

实现普通话闽南话无障碍交流

厦门大学的闽南话智能语音系统出自信息学院洪青阳和人文学院许彬彬的科研团队之手。这个系统到底能做些什么?上午,在信息学院实验室,洪青阳向记者做了演示。

不仅听得懂、说得清,这套系统还会写,可以实现文字和闽南话的互相转换。洪青阳团队认为,从现有资料看,扎克伯格发布的这项技术只是语音到语音的翻译,没有涉及文字。比如,不能形成识别文本,要延伸到其他应用就比较难。在这点上,厦大版闽南话智能语音系统“更胜一筹”。

经过不断的迭代升级,目前厦大的这套语音系统不仅可以精准翻译,还可以识别不同地区、不同口音的闽南话。这要归功于科研团队建立的庞大语音资料库,里面有足够多不同人群、不同口音的语音,并及时扩充词典和语言材料。与此同时,系统后台要不断完善算法,以便学习更多口音和生僻词汇。

普通话和闽南话混杂系统预计年底上线

眼下,研发团队还在开发多语种和方言混杂的智能系统,其中,针对普通话和闽南话混合语音的转换技术预计将在年底上线。

厦门大学信息学院副教授 洪青阳:一个是识别要准,一个是要看得明白。这里面两大挑战都整合在一套系统里面,后面还要更强大,也就是有普通话跟闽南话混杂的。我们内部已经有研发了一个版本,还没正式发布,普通话、英文、闽南话三种语言合起来的,这是我们下一步的目标。

结合硬件设施持续推广

目前,厦大团队的闽南话智能语音系统已经上线,通过小程序和APP,就可以实现闽南话和普通话的无障碍沟通。同时,经过定制化处理后,系统还被应用在一些特定场景里。

厦门大学信息学院副教授 洪青阳:比如乡村的喇叭,农村需要闽南话播报,输入文字就可以直接播报出来,这个很便利,更多的我们还是希望走进千家万户,更多的可能会结合一些硬件,让小孩子可以直接操作,相当于一个益智玩具,真正让更多人感受到方言AI技术给他们带来的便利。

打开看厦门APP获得更多精彩资讯