2018-05-09

一段声音的旅程(二)头疼的音频信号处理

作者:秋半仙,哼哼

上一篇讲到了语音产品的五大关键环节,有兴趣的童鞋可以自行回顾一段声音的旅程(一)语音产品的五大关键环节

今天我们来讲讲这五大关键环节的第一个,也就是音频信号处理。

现在智能设备越来越多,有音箱、后视镜、机器人等等,但是语音的效果却参差不齐。有些人会把这个问题归结到“语音供应商”,说这是供应商语音能力不行,以至于今天很多客户在做语音引入的时候往往纠结于语音供应商的选择。从demo的效果上看,感觉各家供应商的产品都是这样的——

图片源自网络

可一旦做到设备端里,出来的效果却是这样的——


图片源自网络

其实对于语音落地到各种多端设备来说,最难的并不是语音和语义本身,最难的环节就是“音频信号处理”,信号处理出来的音频数据的好与坏,直接影响最终语音的识别效果,而语音的识别效果又直接影响语义的理解结果,这些都是环环相扣的。这就好比你家没买好学区房,你娃就很可能上不了好小学,上不了好小学就可能上不了好中学,上不了好中学就可能上不了好大学,上不了好大学你娃就很可能变成一个啥也干不了只会抠脚啃老的巨婴,是不是想想就好怕怕😱😱😱?(又一不小心暴露了本半仙中年危机买不起房的屌丝心理)

图片源自网络

既然买学区房,哦不,既然音频信号处理这么重要,本半仙掐指一算,和本半仙一样爱学习的童鞋一定偷偷上网搜索了一下“信号处理”,一定看到一大堆的原理图、公式、代码,也一定觉得非常的痛苦,完全不知道从何入手……


图片源自网络

来来来,不要着急,本半仙早就给各位童鞋算好了出路。学习一个完全不在我们知识体系中的知识,我一般建议从两个方面着手,一个是学以致用,也就是从“用”这个目的出发,可以有针对性地有目的性的快速使用知识;另一个是类比想象,将陌生的东西类比到自己熟悉的东西上,从而降维理解,在认知层面快速理解知识;因为我们不需要去真正实现这些东西,自然我们也就不需要逼着自己去看那些不知道对错的公式,特别是艺术设计类毕业的同学。

“信号处理”作为每次语音体验的开始环节,直接影响了每次语音体验。之所以希望产品人员去了解“信号处理”,是希望他们可以去真正了解那些影响语音产品体验的关键因素到底有哪些,以及每种情况对于产品体验的影响到底有多大,从而在产品设计初期,扩展思维,合理创新。在前期,能够帮助团队有效规避一些前期风险;在中后期时,能够帮助及协调团队正确应对和解决问题~

“人”负责”听清楚“这个环节的是”耳朵“,我们可以回忆生活中关于”人耳“的”听清楚“的一些具体例子,比如:

1、堵住一只耳,只用一只耳听的时候会有什么问题?是不是感觉有点区分不出声音的具体位置?

2、如果隔壁在装修,电钻打得整个房间都在震,你在看电视,想听清楚电视里的声音,是不是会很困难?同样,课堂上大家都在说话,想听清楚老师讲课的内容是不是也很困难?

图片源自网络

3、如果一个人感冒了,声音变得很含糊,或者一个性子很急思维很快的人,语速超级快,要听清楚是不是也会很吃力?(此处心疼遇到语速快的演讲者的口译员三秒钟)……

图片源自网络

这里引入两个方法论,“黑箱理论”和“黑箱方法”:

1、“黑箱理论。所谓黑箱,就是指那些既不能打开,又不能从外部直接观察其内部状态的系统,比如人们的大脑只能通过信息的输入输出来确定其结构和参数。

2、“黑箱方法。黑箱是我们未知的世界,也是我们要探知的世界。我们只能在不直接影响原有客体黑箱内部结构、 要素和机制的前提下通过观察黑箱中输入输出的变量,得出关于黑箱内部情况的推理,寻找、发现其内部 规律,实现对黑箱的控制。黑箱方法从综合的角度为人们提供了一条认识事物的重要途径,尤其对某些内部结构比较复杂的系统。对迄今为止人们的力量尚不能分解的系统,“黑箱理论”提供的研究方法是非常有效的。

简单来说,就是把一个事物看成是一个既不能打开,也不能观察内部运作的黑箱。我们通过在外围观察,来对这个黑箱的输入输出进行思考和推理,找寻规律;注意其目的是找规律。我们需要深入去思考,输入具体包含什么,输出具体包含什么,从而得到自己想得到的规律。如果再延伸得复杂一点,黑箱本身也在演进,所以,更深层次的目的则是从中发现规律演变的规律。

看到这儿各位童鞋是不是觉得有点晕?晕就对了!但是我们回忆一下,在以前还没有准确便捷的天气预报的时候,每当我们看到燕子低旋、蚂蚁搬家、鱼儿出水、蜻蜓低飞等等便知道过不了多久就要下雨。“天象”就像一个“黑箱”,我们并不知道为什么会下雨,但是秋半仙和各位的祖先们通过不断的观察和总结,理出了一些规律。“下雨”这个“黑箱”,在下雨前会有一些“输出”,这些输出表现出来就是“燕子低旋”、“蚂蚁搬家”、“鱼儿出水”、“蜻蜓低飞”;祖先们还没有现代的认知水平,对于“下雨”的现象还无法解释,于是秋半仙的祖宗秋大神开始给他的后代秋大仙编,哦不,是传授各种神话故事。慢慢地秋大仙的认知开始不断提升,开始懂得“水汽”、“冷凝”等等知识之后,慢慢地解开了“黑箱”的未知,也认识到秋大神所说的“神话故事”纯属扯淡,其实背后包含了“科学”的“自然现象”。于是秋大仙又把这个结论传授给了秋半仙(诶,怎么感觉我家祖祖辈辈越混越差…… Anyway,本半仙有的时候在想,如果未来我的娃秋小仙进化到一个新的认知高度,会不会回过头推翻他老子认知中的“科学”呢?呵呵~)

图片源自网络

前面举的例子中,我们可以把人耳整体看作一个黑箱,那么实验能够告诉我们,耳朵的工作方式里,两只耳朵相互辅助能够有效辨识声源的位置;环境的噪音会极大干扰我们耳朵提取声源内容的效果;声源自身的状态也会极大影响我们耳朵提取内容的效果……

那么这些生活中的观察,在让我们头疼的“信号处理”中会带来什么启发呢?同样把“信号处理”当成一个“黑箱”,我们可以通过大量实验去理解这个“黑箱”的运作规律,扬长避短,并将其最大的潜力运用到极致,给用户带来最极致的体验。或许,这就是今天“产品”的职责和价值所在吧。

以上是本大仙在研究和学习“信号处理”时的思维方法,希望能够帮助大家更好地去“发现规律”。接下来,本大仙将把过去信号处理方面的经验,梳理总结为“五大不安因素”,帮助大家缩短在信号处理上“发现规律”的从0到1的时间。

恩,啥也别说了,点赞吧!

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 215,384评论 6 497
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 91,845评论 3 391
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 161,148评论 0 351
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 57,640评论 1 290
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 66,731评论 6 388
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 50,712评论 1 294
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,703评论 3 415
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 38,473评论 0 270
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,915评论 1 307
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,227评论 2 331
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,384评论 1 345
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,063评论 5 340
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,706评论 3 324
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,302评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,531评论 1 268
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 47,321评论 2 368
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,248评论 2 352

推荐阅读更多精彩内容

  • 刘双鹤,焦点解决讲师一期班,平顶山,成长分享第859天(2018.5.9星期三) 观点,是说你站在特定的观察点看到...
    在路上_1阅读 590评论 0 0
  • 原稿作者: 小石头《灾难面前让爱说话》2008-07-28 双流部队集结地 编辑: 瑚楊, 摄影:石华 地震—...
    瑚楊AFPMCC阅读 423评论 0 1
  • 忞南舟阅读 189评论 0 2
  • 火山爆发 一刹万物融化 雪山崩塌 一瞬千里倾覆 恶毒咒骂 一语体无完肤 透明玻璃杯 一挥粉身碎骨 覆水难收 破碎的...
    爱宝丫阅读 247评论 0 2
  • 不知不觉妈妈癌症确诊一个月了…昨夜失眠,今天状态不好休息一天,没有去医院,给妈妈点的外卖…虽然在家忙了一天,但...
    紫色的习习阅读 118评论 0 0