您的位置:首页 >资讯 >

思必驰高自然度可定制的语音合成(TTS)技术,如何练成的 ?

2021-06-05 14:50:04    来源:壹点网

语音合成(Text to Speech,TTS)又称文本语音转换技术,顾名思义,是把文本信息转化成语音信息。它是对话式人工智能的最后一环,也是关键一环,它的效果直接影响着人机语音交互的体验。

思必驰作为国内领先的对话式人工智能台公司,它的语音合成技术表现究竟如何?

语音合成的“前世今生”

人的语音,本质上是发音器官震动,产生声波传出。模仿人声,最古老的方法是使用乐器。到19世纪,就可以用机械方法产生语音了。那时,科学家们会制作出一些精巧的气囊和风箱去搭建发声系统,合成出一些元音和单音。

人类发音示意图

进入电子时代的1939年,贝尔实验室H·杜德利制作出第一台电子合成器,这是用共振峰原理制作的语音合成器,该技术使用固定频率,以电子复制我们改变口型时所发出的元音声,也这正是英国剑桥大学著名物理学家斯蒂芬·霍金教授所使用的声音合成器。

上世纪90年代,随着计算和存储能力大幅度提升,基于大语料库的单元挑选与波形拼接合成方法出现,可以合成出高质量的自然人语音。

语音合成技术演变

进入21世纪,随着深度学技术的兴起和快速发展,以语音合成为代表的语音处理技术得到了极大的飞跃。神经网络语音合成在几年来取得了显著突破,合成⾳的⾳质和⾃然度越来越⾼,运⾏速度也越来越快。思必驰目前所使用的,也正是这种方法。

思必驰TTS,魅力何在?

早在2007年于英国剑桥大学创立时,思必驰关于语音合成技术研究就已开启,该项工作由思必驰联合创始人兼首席科学家、上海交通大学教授俞凯领头。

语音合成系统主要分为文本处理、声学模型、声码器三个部分。文本处理负责对文本进行转写和phoneme序列转换;声学模型使用深度神经网络,可以在文本特征与声学特征之间学到更复杂的非线关系;声码器负责将声学模型输出的声学特征,通过卷积运算,转换成音频。

经过10多年的研究积累,思必驰在建模方法上,涵盖了从传统的统计参数模型到最新的基于神经网络的方法;对声码器的研究,涵盖了从传统的基于信号处理的方法到最新的基于神经网络的方法。

语音合成的质量与效果,既有赖于语音厂商的算法模型,还取决于音频语料的质量,即数据质量。思必驰有着丰富的声优资源以及声优挑选的经验,在苏州建设有专业录⾳棚并与国内多个城市的录⾳棚有着长久合作关系。与此同时,思必驰数据团队也对数据标注有着严格的质量把控。

位于思必驰苏州总部的专业录音棚

经过多年的技术积累,思必驰已逐步形成了⼀套成熟的技术⽅案,业务涵盖了⼤数据语⾳定制、⼩数据快速定制、声⾳克隆、歌声合成、⼩语种合成、⽅⾔合成、情感合成等,可选公有云、私有云以及离线三种部署⽅式,经典⾳⾊可在思必驰官⽹实时体验。

2017年、2020年,思必驰还先后参与国家标准《中文语音合成互联网服务接口规范》与行业标准《中文语音合成服务系统评估规范》的制定,并成为全国首批通过评估测评的公司之一,获得“TTS-4S(Standard Similarity Scene System)服务证书”。该测评从合成质量、定制能力、场景表现力和系统安全可靠等维度,全面评估合成水和服务能力。

2019年11月,思必驰首批通过“中文语音合成水测试”

未来世界,百“声”争鸣

为能快速提供语音合成定制服务,思必驰全程提供音色选择、录音指导、音频处理、模型训练、服务部署等专业服务,赋予产品开口讲话的能⼒。

截至目前,思必驰语音合成已建设的⾳⾊库内包含音色接200个,涵盖多种⾓⾊、多种风格,以及各个年龄层次。

思必驰语音合成服务,也已在车载、⽩电、机器⼈、智能客服等诸多领域成功落地,为众多终端产品赋予声的魅力,使得万物皆可沟通,并逐渐走入人们的工作与生活。

当你在家里“躺”,来自如影智能的语音管家“Edison”,用他温暖、绅士的声音(文章开头的音频A),为你带来踏实与慰藉;当你在爱车中驰骋,车萝卜的语音助理“萝卜”清脆、简明的声音,如同车水马龙路途中的一股清流;当你接起顺丰95338服务热线的外呼电话,智能客服“丰小蜜”亲切又不失严谨的声音,配合高效的工作能力,带给你最省心省力的服务体验……

镜头切换到泛娱乐领域,思必驰团队打造的“小驰机器人”在央视《机智过人》中,现场用撒贝宁的声音生成了一曲《好久不见》。在《经典咏流传》中,思必驰携手栏目组共同推出 “读诗成曲”线上互动小工具,提供实时读诗成曲的能⼒。用户仅需读几句简单的诗词,便可快速生成有腔有韵的歌声,互动总量超过821万人次。

思必驰联合创始⼈兼⾸席科学家俞凯参与节目录制

在个化定制上,思必驰不仅可以提供普通话定制、歌声定制,还可以通过迁移学方法,提供更高难度的方言、小语种TTS定制,如粤语、上海语、四川话、⼭东话、东北话、德语、法语等。

而思必驰的情感合成技术,则赋予美妙音色丰沛的情绪,让声音更具表现力与感染力。

此外,思必驰声音复刻技术也已在斑马智能、爱驰汽车、岚图汽车、仙豆智能等车联网客户以及IoT领域落地,仅需录音20句话约400汉字,10分钟之内便可以完成模型生产,MOS 合成音/录音达到90%,相似度合成音/录音达到80%。

人类的声音,是人类语言的物质外壳,却承载着重要的信息和真挚的情感,拥有着无穷的魅力。人工智能突飞猛进地发展正不断催化人机交互方式的巨变,“万物可沟通、万事可打理”的语音互联未来世界,正加速到来……

免责声明:市场有风险,选择需谨慎!此文仅供参考,不作买卖依据。

标签: 技术

精彩阅读

关注:王导:黄金1631空单获利,继续看瀑布

海南跨境进口迎来新商机,港免跨境购打造“全民共享”创业平台

​2022中国农民丰收节---第五届中国农民电影节启动

天天看热讯:欧佩克减产在即?油价 又双叒 稳了?

全球快看点丨黄力晨:空方强势  黄金价格继续看跌

通讯!何小冰:黄金破低仍要看延续性,原油低点切换区间 09.28

世界动态:易维哲:黄金原油开始小幅分化,黄金继续做空

南京的梅花山在哪里?梅花山景区开放时间是何时?

长沙洋湖湿地门票免费吗?洋湖湿地公园能骑自行车进去吗?

信用卡逾期收律师函怎么办?信用卡逾期被起诉立案后怎么解决?

信用卡经常逾期不还会怎么办?信用卡逾期20天了有什么后果?

工商信用卡逾期废卡怎么办?信用卡逾期20天了该怎么办?

农行信用卡逾期一年怎么办?信用卡逾期能协商只还本金吗?

杭州2022年亚运会特许商品《心心相印·三连印》发布仪式正式举行

Skyee | 卖家们都需要知道的亚马逊广告扣费逻辑

【报资讯】9.28总结-秋末悔城:趋势总结!必看必有所得!

焦点资讯:掘金者原油晚评:原油维持早盘计划,77.8继续做空!

环球视点!郑氏点银:黄金逐步打压走弱将试探1610,原油继续考验76

瑞得生参展加拿大健康展会,多组分人参皂苷受热捧!

世界通讯!金界传奇:黄金1615继续买入!!!

热消息:9.28欧盘—求模糊此恨:3天9空黄金顺势捡钱!做空唯一解

焦点要闻:9.28欧盘—秋末悔城:3天9空黄金顺势捡钱!做空唯一解

天天热点!杜康:黄金破位新低,欧盘1630继续空!

速递!头狼:早盘黄金1631现价空以及1629加仓空,四连胜收割

万豪旅享家推出“万味奇遇”餐饮主题活动

长江实业全新超甲级商业地标 长江集团中心二期设计理念以人为本

极度未知20周年之HyperX Alloy Origins Core键盘联名安踏新体验

吃饭睡觉打豆豆是什么意思?企鹅吃饭睡觉打豆豆笑话怎么说?

能隐藏起来的小米电动晾衣架!

《少年行 暮年归 血浓于水一家亲》再观《黄塬厚土》有感

热烈庆祝安安整理-静园茶文化合作签约

工商银行信用卡积分多久清零? 信用卡积分怎么获得?

“人民出行”再次亮相赣州街头,服务群众低碳绿色出行

孙宇晨UDC活动获韩媒全方位报道,波场“韩国路线图”呼之欲出

IHG优悦会携手品牌大使童瑶女士及合作伙伴蚂蚁集团倡导绿色出行

天猫国际发布全新业务策略,聚焦“好货、好服务、好逛”

助力2022年卡塔尔世界杯品质出行LEVC TX5特别定制版车型下线交付

如何在Z世代脱颖而出?既要能干饭,还要会做饭!

全电全面铺开,你关心的销项、进项升级相关问题都在这儿了

16岁女生54秒扑灭起火摩托车太帅了!不能用水扑灭的火灾有哪些?

广阳区持续推进重点河流管护项目建设 水环境面貌焕然一新

今年前8月河北省对欧盟进出口397.5亿元 增长12.2%

陶氏公司5G生态系统交互平台正式上线,全方位展示面向未来通信的有机硅解决方案

河北省地方标准现行有效数量达2935项 居全国前列

全国示范!黄冈这家企业入选“国字号”名单!

手表品牌排行榜怎么选?沛纳海赠你一“腕”明月

焦点资讯:图灵波浪9.28-黄金短期震荡、空头将继续考验1615

当前报道:图灵波浪9.28-白银逼近重要支撑、18.12或探底回升

天天精选!黄金短线突然跳水!金价逼近1625美元 机构:黄金、白银和原油最新技术前景分析

世界热点!FPG财盛国际:黄金空头期权减少,俄罗斯欲将干预原油?

焦点热文:掘金者原油早评:原油短线继续看跌,77.8入场做空!

东方盛虹盘中跌停 六处资产以转让起始价格成交

米家透明蒸汽电饭煲惊艳上市,揭开电饭煲创新之谜

天天亮点!上市公司掀外汇套期保值热潮

环球聚焦:大商所出台国庆节假期市场风控措施

全球短讯!黄金目前处于熊市,机构为何预测明年有望反弹至1900美元?

全球要闻:光大:11月加息压力仍存 黄金或试探1600关口

世界今头条!【孤魂黄金】黄金如期回踩次低点,能否收涨视为关键

环球今热点:花生逆市大涨背后的逻辑——进口矛盾缓解,供应预期悲观

今日讯!王导:黄金1640下方继续空,目标1600

快资讯:螺纹钢和热卷 哪一个向上潜力更大?

天天短讯!9.28日评—秋末悔城:黄金低位整理,持续高空唯一出路

天天最资讯丨头狼:黄金1631现价空

公益直播丨知名个人成长作家张德芬:教你活出想要的幸福关系

世界热点!金汇得手:黄金低位震荡,1631日内多空分水

环球关注:大涨行情一触即发!?大多头:两大利好来袭 黄金明年将飙升至1900美元

【环球新视野】杜康:黄金1638空下跌获利,明日再战!

世界热门:资金大肆逃离黄金ETF!唱空声不绝于耳 金价势将跌穿1600美元?

关注:头狼:黄金空单全部在1634收割离场

天天快消息!张良点金:晚间黄金1635入场空!

环球快看:图灵波浪9.27晚-白银低位宽幅震荡,探底临近尾声

环球信息:王导:黄金1646下方继续空,目标1600

天天视讯!外汇界新一:美联储今晚发言还能让黄金下跌吗?

全球通讯!杜康:黄金反弹遇阻,美盘1640继续空!

焦点速讯:头狼:黄金1642承压,继续空,下方看1600一线

世界时讯:图灵波浪9.27晚-原油弱势反弹、空头剑指75

每日精选:黄金多头不要高兴太早!分析师:金价后市恐还要大跌逾35美元

2022款瑞虎3x 对比远景X3 PRO,谁是适合年轻人的入门级精品SUV?

焦点快播:金界传奇:预期黄金先反弹1670再跌!

每日热闻!大行情!美元跳水、黄金大涨 金价刚刚突破1640 欧元、英镑、日元、澳元和黄金...

全球热推荐:技术形态很“丑陋”!白银日内交易分析:银价达成首个目标价 后市仍有大跌风险

【环球报资讯】掘金者原油晚评:原油保持早盘观点,77.65继续做空!

天天实时:何小冰:黄金原油空间箱体震荡,时间循环加速 09.27

观热点:易维哲:黄金原油开始走同步走势,反弹修复完成继续开空

妯娌的三国时代大结局是什么?冯雪最后和谁在一起了?

宠物品牌IP的跨界突围,素力高发布首款毛茸茸NFT

我爱男保姆大结局可可去了美国了吗?方原和陆晴在一起没?

天龙八部带头大哥为什么要杀萧远山?天龙八部跟射雕英雄传的关系是什么?

世界新资讯:9.27金市健言:纳指反攻冲锋路上别掉队!否则只是娃娃兵!

焦点快播:郑氏点银:黄金连阴加速走弱出底,原油同步进行

环球观点:杜康:黄金下跌趋势,欧盘反弹继续空!

天天新动态:突发行情!黄金短线大涨 金价突破1636美元 黄金最新日内交易分析

天天热头条丨国际金价短线上看1644美元

女子流产5次被前男友索要12万彩礼 实际转账多为必要生活花费

妈妈教爨姓儿子写名字时崩溃是怎么回事?全世界姓爨的有多少人?

助力县域经济腾飞 超大型城市综合体“亮相”灌南

每一面,皆赢面!“新时代全优家轿”艾瑞泽8惊喜上市,宠粉价10.89万元起

护黄河生态,集泰水漆助国家管网东营油库迁建项目顺利中交

集泰股份参编《定制门窗工程技术规程》,助力门窗产品提档升级

集泰股份牵头编制《粘接型导热灌封胶》团体标准,已发布实施

科勒亮相2022可持续设计峰会 为美好环境而设计 许以更好的未来

KOO钱包业务员满意度评价好评连连,用服务提升金融体验

德华安顾人寿心系基层医务工作者,为山东省“业务院长”捐赠价值7760万元团体意外险

以“数字化+个险”赋能未来 德华安顾人寿拥抱新征程

荣耀X40参数配置盘点 千元市场中的一匹黑马

电影《搜救》定档国庆 电影搜救开机时间是什么时候?

中国妇幼保健协会与全国专家及秋田满满品牌,共同推动精细化辅食喂养科学化发展

“志强出行”共享汽车重庆上线进入倒计时 ——300台红旗H5签约仪式