当前位置: 主页 > 房产资讯 >

    AI帮忙渐冻症患者恢复说话功用!受害人:声响回来了

     时间:2020-01-05 10:04  

    (原标题:AI帮助渐冻症患者恢复语言功能!第一位受益人:我的声音回来了)

    AI帮忙渐冻症患者恢复说话功用!受害人:声响回来了

    冰桶挑战盛行的那一年,前美国国家橄榄球联盟球员Tim Shaw被诊断患有肌萎缩侧索硬化(ALS)。他生活的目标也从球场上的奋力奔跑,变成了不再跌倒。

    Tim曾是美国国家橄榄球联盟的后卫,曾效力于卡罗莱纳黑豹队、杰克逊维尔美洲虎队、芝加哥熊队和田纳西泰坦队,不幸的是,2014年他被诊断出患有ALS。之后,轮椅变成了他生活的日常,在没有帮助的情况下,Tim再也无法像正常人那样说话、吞咽或呼吸了。失声对于任何人来说,都是毁灭性的打击。

    但幸运的是,Tim参与了DeepMind公司以及谷歌(Google)展开的一项针对语言障碍人士的技术项目——Euphonia,有幸成为AI语音识别和文本转录技术的第一个ALS受益患者。时隔5年多,Tim和他的家人也再次重新听到了他的原声。

    AI帮忙渐冻症患者恢复说话功用!受害人:声响回来了

    ▲时隔多年,Tim与母亲再次听到由AI合成的“原声”(图片来源:DeepMind官网)

    Euphonia项目是针对语言障碍人士的语音到文本的转录服务,基于神经退行性疾病患者的音频数据,结合Parrotron模型(基于注意力机制的Seq2Seq模型),从而可以提高语音合成的效率并生成高质量的语言。针对Tim展开的“声音恢复”项目持续6个月,研究人员第一步先对Tim患病前的声音进行提取,将其声音作为合成语音的样本数据。因此,研究人员生成了一个名为WaveNet的生成式AI模型。

    WaveNeat模型通过识别韵律进而模仿合成人类语言。与过去的一些语音生成模型相比,它产生的语音片段更真实、更具说服力,WaveNet模型在模仿人类语音合成语言方面已达到与人类70%相似的水平,同时具有更高的语言生成效率。该AI模型在谷歌转为机器学习定制的张量处理器(TPU)上运行,1秒钟的语音样本平均只需要花50毫秒便可创建。

    WaveNet模型特点在于,不同“口味”的英语也难不倒它。不管是带有印度口音的英语、韩国口音的英语还是纯正的英式发音等,它都可以进行模仿。目前WaveNet已经用于Google智能助理(Google Assistant)系统,能识别9种不同口音的英语。

    AI帮忙渐冻症患者恢复说话功用!受害人:声响回来了

    图片来源:Pixabay

    研究人员在建立相关模型后,另一关键操作便是微调,这也是从最少的训练数据中获得高质量综合效果的关键。首先他们在数以千计的扬声器上对WaveNet模型进行大规模的预先训练,然后AI从Tim过往说话的音频影响素材中提取小部分语音样本,不断模仿练习后,WaveNet所生成的语音自然而然会具有说话者本人的特征。

    不过光有优秀的语音模仿和生成能力还不够,对于AI模型来说,完美的模型体系结构是保障其系统整体运作效率的基础。于是研究人员将WaveNet模型迁移至WaveRNN模型上,WaveRNN模型更紧凑,所生成的音频更保真。此外研究人员还对能够将文本转换到语音的系统——Tacotron 2采用了微调技术,它可以基于频谱图或随时间变化的音频信号频谱的视觉表示建立语音合成模型。也就是说,AI不仅学会了“听声拟声”,它还会“看图拟声”!

    6个月下来,针对Tim所展开的“语音恢复”项目取得不小进展,目前其研究成果已经向公众进行展示。在由小罗伯特·唐尼讲述的新兴技术节目《AI人工智能时代》第一集中,Tim和家人第一次听到了自己合成的声音,节目中通过基于Tim曾经语音文本进行训练的AI读出了34岁的Time写给22岁的自己的一封信。

    AI帮忙渐冻症患者恢复说话功用!受害人:声响回来了

    ▲Tim(右二)与家人以及Euphonia项目成员一起收看《AI人工智能时代》(图片来源:DeepMind官网)

    虽然合成的声音不是很完美,缺少一些人类在讲话时独有的表达张力,但针对Tim的这项研究所取得的实际效果来看具有实际应用的潜力及价值。DeepMind研究副总裁Koray Kavukcuoglu先生表示:“最初始版本的文本-语音转换系统WaveNet于2016年首次推出,随着时间的推移,其现实世界的用途不也在断发展。这一技术的成熟以及落地,对于像Tim Shaw这样的ALS患者来说是一种希望。”

    当疾病来临,它摧毁人类的健康、打乱人类的生活步调;可别忘了,科技也在发展,那些被疾病缠绕时间,慢慢会随着先进技术的指针转动,直到疾病治愈、重回健康。

    参考资料(可上下滑动查看)

    [1] DeepMind and Google recreate former NFL linebacker Tim Shaw’s voice using AI Retrieved Dec 23, 2019 from https://venturebeat.com/2019/12/18/deepmind-and-google-recreate-former-nfl-linebacker-tim-shaws-voice-using-ai/

    [2] Google’s Parrotron is an AI tool for people with speech impediments Retrieved Dec 23, 2019 from https://venturebeat.com/2019/07/17/googles-parratron-is-an-ai-tool-for-people-with-speech-impediments/

    [3] ALS is slowly robbing ex-linebacker Tim Shaw of his muscles. But he won't let that stop him from living.

    Retrieved Dec 23, 2019 from https://ftw.usatoday.com/2017/02/tim-shaw-book-blitz-your-life-als-lou-gehrigs-disease-tennessee-titans-nfl

  •  
中国向世界敞开大门 解锁进博会上的“甜 上海:到2025年 试点推广适龄女性未成年 商务部:今年前三季度我国服务进出口总 掌声连连,兴业银行厦门分行守护企业财 七届“全勤”!蒙牛再赴进博约 共享乳业 深圳二手房成交连续4周超2000套,10月成交 消费、投资、需求旺盛!52.6%、50%……透 九江银行:以“融”促“产”,担当服务 外资加码!企业搭乘进博会“快车”在中 广西农村公路通车总里程突破15万公里 礼来“进博会”展示糖尿病、肥胖等全球 上海杨浦:企业新开设低空航线 最高补贴 金融反腐追踪|10月至少6人被查、国有大 2023年底广东家政服务市场规模达1480亿元 牵手比亚迪 海底捞企业火锅“朋友圈”再 内蒙古银行:董事长郭大勇任职资格获批 复星保德信人寿与Club Med地中海俱乐部达 A股新纪录!连续25个交易日超万亿 沪指涨 10月中国大宗商品价格指数环比上涨3% 王春英任中国进出口银行行长 建司75载丨勇做“拓荒者”,国寿寿险新 前三季度我国服务进出口总额55181.4亿元 兴福长情相伴 守护银龄生活 兴业银行厦 诺华创新肾脏产品组合进博“首秀” 加码 加薪38%!波音美国工厂工人投票通过四年 践行“担当”文化,助力共同富裕——国 华东医药与荃信生物合作研发 国内首个乌 北京:19项公立医院医疗服务调价 工信部召开低空产业发展领导小组第一次 数字金融拔尖创新人才培养项目启动会举 中国人民大学成立全球领导力学院 业内:增强系统立异 鞭策智能算力的系统 财经不雅察:进博七届“全勤生”有何配 鞭策高程度开放 合作双赢创将来 数读中国丨增量政策兼顾推动 我国平易近 意年夜利总统马塔雷拉将访华 以中国式现代化新进展为世界供给新机缘 印度尼西亚总统普拉博沃将访华 WTA年关总决赛丨郑钦文2:1力克莱巴金娜收 谱写新时期社会工作高质量成长新篇章 人平易近艺起评:“小文创”让文化遗产 人平易近网评:加强鼎新取向的一致性 2024年下半年戎行直接提拔招录军(警)官 深切践行人平易近城市理念 积极介入城 悉尼马拉松成为世界马拉松年夜满贯赛事 “减肥神药”真能终结肥胖?权威指南来 郑钦文收成WTA年关总决赛首胜 准确对待合伙调剂 北京新能源汽车财产补齐高压电系统短板 “龙行全国 云上金顶” 与传祺 ES9 共赏峨 多品牌计谋起头崩溃 自立车企站在十字路 动力电池比赛6C超充 超充时期是不是到临 新能源汽车维修“缺位”千亿级市场待腾 广东19地市将分三批推行电子行驶证 行业初次货车横向夹击叠加刮底挑战 MA 索尔海姆点赞中国可持续发展经验 呼吁年 因工作人员未按时到岗影响部分旅客正常 西藏积极推进通用航空产业发展:抢抓新 广西柳州轨道集团:将对违建轻轨墩柱进 东北亚法律查明中心成立:打造黑龙江涉 日月视频 手机版 欧歌影视仓 免费版 大吉订购 最新版 月光影视仓 手机版 比目鱼影视 官方版 南柯电影网无广告 最新版 巴黎直播 手机版 91日剧 手机版 月兔直播 免费版 泰剧兔官网 免费版 小鱼影视2024 官方版 谷歌街景地图 手机版 dj打碟机模拟器 最新版 嘿嘿动漫 最新版 影视工场播放器 手机版 风筝影视 最新版 星空动漫 最新版 七星直播t 官方版 逗猫动漫 官方版 蜜果酱直播 免费版 河狸影院 最新版 高德地图车机 免费版 花火影院 手机版 hifi音乐电视免费版 松果影视 最新版 今日头条2024 最新版 白泽影视t 最新版 巴士影院 最新版 洋葱T直播 手机版 忍者必须死3vivo免费版 魔剑奇兵折扣官方版 忍者必须死3官服2024官方版 口袋进化微信登录手机版 口袋进化vivo最新版 口袋进化qq登录本官方版 口袋进化应用宝最新版 口袋进化OPPO渠道服官方版 口袋进化小米免费版 555电影正 官方版 天天趣玩红 最新版 地球影视 官方版 小柠檬影视 手机版 电影猎手追剧 免费版 B次元官网正式 免费版 两年半社区安装 最新版 小柚子影视 免费版 姐衣yw二手衣物 最新版 达达龟影视 最新版 乐享音乐 官方版 暖光影视 免费版