db42f9a21644fa28ff37659d80102398.png

本文主要围绕几个主题展开:

  1. 声纹识别的发展历程
  2. 目前的主流方向,基于深度学习的声纹识别
  3. 最后介绍一下相关的其他语音技术

首先我们来看下声纹的概念及为什么可用于识别

声音就是一段波,声纹就是携带了信息的声波频谱

93650363a58882a0aa3a31b7958e2cfd.png

声纹特征与其他生物特征的对比及特点

8d0d617ba11cc93a2466e1d276d86b50.png

声纹识别在产品上的本质主要就是以下两种工作方式: 1比1 和 1比N

6ef87cd0a2d15e861bb4454933bf2d1b.png

工作流程大致如下:

  1. 提取语音,预处理,提取特征
  2. 利用训练好的模型,计算该语音对应的声纹模型或者声纹特征
  3. 最后进行相似度打分,得到结果

556cb4a34cb461e694e189621cb4d280.png

由此我们可以看出声纹识别主要就是三大部分:特征,模型,得分。下面根据这三大要素分别阐述


声纹识别三大部分:特征,模型,得分

首先看下这三大部分的整体技术流派和技术发展路线

dffa27d1d852260bc7624cd644f16743.png

语音特征介绍

5f0d1be6a4bd6f63e63be0cf85ced2f7.png

4ac071db64b4ca15137d339da15c1e29.png

d21d340098db26efa2b894368af2e0e6.png

f60bc173909ceaa84f2b8ab669720d5a.png

声纹模型的衍进

传统的声纹识别 主要是基于统计思想和概率论,结合声学,信号学,机器学习等算法

2012年,跨入了以deep learning 为主线的算法,DNN-based系统陆续出现,并基于深度学习领域的新思想持续改良

近两年发展起来的End-to-End 端到端系统,代表:2018年谷歌百度的相关论文

可以参考回答

声纹识别算法有哪几种?​www.zhihu.com
c4cce9167efd60d35d88386cfbef0a7b.png

9162e85b60c9e7d5abf3d21a1bda7885.png
https://www.zhihu.com/question/53707809/answer/316946465

3e1bc4446ea9462de0531967792a972e.png

35e04ede6b2d9c9755940750dec1cb6d.png

85a0d89bbc902158b582d866eaa80e33.png

2cb6cff2d228cb16da1ff514f2e3db58.png

efc9f44cbff3afe541fca54bb95561f8.png

de33a2af7031a83d773bcc489062f12a.png

基于深度学习的声纹技术

1b4b98424b96f426b1a808ce04e62154.png

cbb8bf1dedb1c492057d68faec0c638e.png

ccad83ee7e643ddfb467388a5a6d4e53.png

上面的网络结构中,有一个Statistics Pooling Layer,负责将Frame-level Layer,Map到Segment-Level Layer,计算frame-level Layer的Mean和standard deviation。TDNN是时延架构,Output Layer可以学习到Long-Time特征,所以x-vector可以利用短短的10s左右的语音,捕捉到用户声纹信息,在短语音上拥有更强的鲁棒性。

3b951195b3c34d41f4990a1ec3aeb62d.png

其他语音技术介绍

8e98e2b525174ec89e1d5e0e4a02ee65.png

5c9a8ec1a6b930d993d148587f87190f.png

bd94de0f9896886abb1f75315468af8f.png

583d3c3ef0fe81a5635f957105337589.png
Logo

魔乐社区(Modelers.cn) 是一个中立、公益的人工智能社区,提供人工智能工具、模型、数据的托管、展示与应用协同服务,为人工智能开发及爱好者搭建开放的学习交流平台。社区通过理事会方式运作,由全产业链共同建设、共同运营、共同享有,推动国产AI生态繁荣发展。

更多推荐