115小说网

手机浏览器扫描二维码访问

第四十三章 语音通话模型的制作(第2页)

首先每个人都有一个自己的语音模型,训练这个模型需要有一个很优秀的训练好的模型,然后做迁移学习。

但是训练基础模型的时候,是需要很多数据的,程序林奇很快的就做好了,但是没有语音数据是硬伤。

最后林奇收集了很多的网络上公开的音频资料,来输入到模型中进行训练,刚开始的时候找来了很多的汉语的音频。包括从电视剧,电影还有广播,新闻等里面抽取的音频。

等训练好之后林奇测试之后发现针对标准的普通话,这个表现很好,但是如果是方言甚至是另一种少数民族,比如蒙古语,这个软件表现的就非常的不尽人意。

后来林奇换了一个思路,不把每个人的语音转换为文字。而是让机器自己发明一种能发音的文字,不需要人类能看懂,只需要这个软件自己能看懂就好,可以把听到的任何声音都转换为这种机器自己能识别的文字。

修改了核心的算法之后,林奇再次把数据输入进去,同时这次增加了很多的其他的数据,包括英语,德语,日语……几十种语言的数据。还有很多的大自然的声音,乐器的声音,等等。

电脑分析这些数据建立一个模型过程是很慢的,经过漫长的等待之后,终于重新生成了一个模型。

经过测试之后,效果出奇的好,林奇发现尤其是针对有规律的东西,包括语言,乐器这些东西,都能有很好的效果。

然后这些数据经过压缩之后,体积比文字的还小了很多,即使网络环境再不好,只要不是完全没有,通话的质量都是很完美的。

但是美中不足的是,针对不太规律的东西,这个模型处理的效果就不是很好,比如一些环境噪音或者大自然的风声雨声鸟叫等。

林奇接着又去修改了模型,但是训练后的结果都不是很好。

后来林奇想了想“环境噪音,在语音通话过程中,人们应该是不想要的,我干嘛还要费那么大的力气给加上。这不正是几千块钱的所谓的主动降噪耳机,或者是骨传导耳机追求的降噪的功能吗?”

想至此,林奇想抽自己两巴掌,白白浪费了那么多时间。

至于一些风声什么的,林奇也有了一个很好的解决方法,就是在算法里面判断这个声音,如果是没有规律的,但是和环境噪音又有些区别的,那么就保留原有的语音通话,只有这种有语言的才智能的运用自己这套系统。

这个系统的价值在于能让语言的传输大大减小体积,同时还能高度还原原声,甚至带有主动降噪功能。

而这个系统的难点在于:模型的训练。

训练的时候刚开始针对的是普通话,到了后来,林奇彻底的放开了自己的思维,让机器自己去生成一种能传输的自己认识的语言,这样效果大大的提升了,不用针对每一种语言来训练好一个模型,而是针对所有的声音,训练出了一套通用的模型。

在使用的时候,只需要把这个模型加载到用户的手机,用户只需要说几句话,模型就会自动生成对应的音色,还有对应的语言的机器翻译。

通过实际的使用,林奇测试发现,这完全秒杀了世面上所有的语音通话软件。

(大雁文学WwW.XiaoYanWenXue.CoM)

永恒剑主  极品仙师  学霸的微观世界  巫神纪  打个电话给大侠  网游之创世降临  蜀山之天宪神君  桃色小神医  侠道行  无限电影之科幻霸主  奋斗在加拿大  绝世天君  重生之聂小倩  超级大忽悠  太玄战记  国策  穿越成为近战法师  帝国重器  明末国色江山  月临:世纪录  

热门小说推荐
网球王子之破发睡神

网球王子之破发睡神

新书秦朝大神棍来啦,读者老爷们来宠幸哇么么哒在网坛,流行着这样一句话,你永远都要试图不断去叫醒一个装睡的人,因为当他真的睡着时,你就已经输了。而让这句话出现的,正...

狼王战将

狼王战将

六年前,他成家族弃子,遭受陷害,与女人发生关系,被迫离开。六年后,一代战神,重返故里,只为让妻女幸福一世。...

风流飘香

风流飘香

一个普通学生在一次事故中,想到了前世的一些事情,经过努力探索,知道自己身负一份历史使命。故事发生在现代,但是要去古代完成使命,他是否能完成,是否还会回到现代。读者去书中找寻答案吧。...

漫威:我有一座全能商店

漫威:我有一座全能商店

坐在自己商店里的斯诺悠然自得,外面却闹得不可开交。托尼斯塔克斯诺帮我打造的战甲真无敌。美国队长斯诺,再帮我升级一下盾牌。鹰眼斯诺,我再买点箭矢,这特么真好用。尼克弗瑞科尔森,再去找斯诺买点药剂。娜塔莎哈尼,商店门口都被挤爆了金并满大人灭霸该死的斯诺不卖给我们,这下怎么打?...

万界军武系统

万界军武系统

作者清幽十四少的经典小说万界军武系统最新章节全文阅读服务本站更新及时无弹窗广告小说万界军武系统叮!更新宿主激活万界军武系统听到这个晚来了二十年,在自己二十岁走上了人生巅峰的时候忽然出现的系统的提示音,陈军一时间陷入了沉默!不过这个主世界遮天是个什么意思?...

每日热搜小说推荐