走近特定音频识别(之二)——计算机是靠什么来分辨声音种类的?

我们人类是可以轻易地分辨声音的种类,但很难有人能说清楚人们分辨声音种类的原理。

很难吗?好吧,我尝试总结一下:耳膜可以感受到空气中声波所传递的压强变化,进而由神经传导给大脑,然后……然后就没有然后了,因为我们对于大脑学习机理的认知目前还不足以解释这些问题。

那么,计算机是依靠什么来分辨声音种类的呢?

我们都知道,音频在计算机的存储是以数字方式进行的,而这个数字,是如何得到的呢?没错,就是数模转换器。麦克风或者模拟信号的输入信号,通过数模转换,变成量化的数字信号,用横轴表示时间,纵轴表示声音能量的大小,就是而我们常见的波形图,也就是下面这个样子:
走近特定音频识别(之二)——计算机是靠什么来分辨声音种类的?

下面的图是另一段音频的样子:

走近特定音频识别(之二)——计算机是靠什么来分辨声音种类的?

你能看出这两段音频的差异么?比较难是吧!第一幅图的是一段外文电影的音频,而下面这幅图,是蜂群飞舞的声音。差别挺大是吧!可是从波形图上看上去,这两段音频似乎没啥区别啊?于是,一位困扰了很多通信类本科生的老先生出马了,他就是——傅里叶。

通过傅里叶变换,我们可以得到语谱图。语谱图就是以时间为横轴、频率为纵轴,以颜色的明亮程度表示能量大小的图像(颜色越暗,表示能量越小,颜色越亮,表示能量越大)。频率可以和平常的听觉联系起来,频率高的信号,耳朵听起来比较刺耳,频率低的信号,听上去比较低沉。
从语谱图中,我们可以轻易地看出上面两段音频的差异。

这是电影音频的语谱图:

走近特定音频识别(之二)——计算机是靠什么来分辨声音种类的?

这是蜂群飞舞音频的语谱图:

走近特定音频识别(之二)——计算机是靠什么来分辨声音种类的?

怎么样,这下很清楚了是吧!

    计算机就是依靠傅里叶变换之后的数据,来进行音频识别的。
    可是计算机也没有长眼睛,它是如何进行判别的呢?且听下回分解:)

原创文章,作者:admin,如若转载,请注明出处:https://www.isclab.org.cn/2014/10/31/%e8%b5%b0%e8%bf%91%e7%89%b9%e5%ae%9a%e9%9f%b3%e9%a2%91%e8%af%86%e5%88%ab%ef%bc%88%e4%b9%8b%e4%ba%8c%ef%bc%89-%e8%ae%a1%e7%ae%97%e6%9c%ba%e6%98%af%e9%9d%a0%e4%bb%80%e4%b9%88%e6%9d%a5/

(1)
adminadmin
上一篇 2014年10月28日 下午4:56
下一篇 2014年11月4日

相关推荐

  • 其它

    项目名称.  项目来源.  项目编号.  起止时间 1. XXX调研.  国防科技大学合作项目.   .  2005.03-2005.12 2. XXX特种程序研制.  安全局某部…

    其他 2011年11月10日
    617
  • 中心主任

    中心主任姓名:罗森林性别:男出生年月:1968年2月民族:汉专业技术职务:教授学位:博士毕业院校:北京理工大学通讯地址:北京海淀区中关村南大街5号邮编:100081电子邮箱:Luo…

    其他 2011年10月10日
    1.0K
  • II型糖尿病风险评估系统上线及更新通知

    请点击链接,进入相关页面: BFS-糖尿病风险评估系统 (Diabetic Risk Assessment System, BFS – DRA) BFS-糖尿病患病风险…

    其他 2014年10月6日
    470
  • 省部级

    项目名称.  项目来源.  项目编号.  起止时间 1. 基于MPEG-2码流的非线性编辑系统.  第二十七批中国博士后科学基金.   .  2000.06-2000.12 2. …

    其他 2011年11月10日
    347
  • 01520802

    2011年11月18日
    480
  • 频繁子图

    聚类学习作为机器学习中最为常用的算法,已经广泛的应用于许多领域。本文主要介绍聚类的一些基础知识,并且以概率聚类模型为例,并讲解一个聚类算法:基于t分布的熵惩罚最大期望算法,使大家对…

    其他 2019年9月20日
    507
  • BFS-汉语句义结构标注系统上线

    BFS-汉语句义结构标注系统(Chinese Tagged Corpus tool, BFS-CTC-tool)

    其他 2014年10月19日
    456
  • BFS实验室学术论文发表情况的通知

    1. Luo Senlin, Chen Songjing, Pan Limin, Zhang Tiemei, Han Longfei, Zhao Haixiu. Exploring…

    其他 2014年10月6日
    676
  • 教育教学大类模板

    其他 2011年10月9日
    377
  • 表格

                项目名称.            项目来源.         项目编号.          起止时间 1.         高稳定度、多量程恒流源的研制.长…

    其他 2011年10月11日
    401