i-vector 和 d-vector 的区别

Question

有人能解释一下 i-vector 和 d-vector 之间的区别吗？我所知道的只是它们广泛用于说话人/语音识别系统，它们是表示说话人信息的模板，但我不知道主要区别。

Answer 1

我不知道如何用通俗易懂的语言正确表征 d-vector，但我可以提供一点帮助。

身份向量，或i-vector，是特定语音片段的频谱特征，通常是一小段音素，很少（据我所知）像整个音位。基本上，它是以与时间片的高斯混合同构的形式表示的离散频谱图。

编辑

感谢那些提供 cmets 和出色答案的人。我更新这个只是为了替换我最初尝试中的错误信息。

d-vector 是从 Deep NN 中提取的，即 DNN 最终隐藏层中特征向量的平均值。这成为说话人的模型，用于与其他语音样本进行比较以进行识别。

Answer 2

I-vector 是表示帧级特征分布模式的特质特征的特征。 I向量提取本质上是GMM超向量的降维（尽管在计算i向量时没有提取GMM超向量）。它以与特征语音适应方案或 JFA 技术类似的方式提取，但按句子（或输入语音样本）提取。

另一方面，d-vector 是使用 DNN 提取的。为了提取 d 向量，训练了一个 DNN 模型，该模型采用堆叠滤波器组特征（类似于 ASR 中使用的 DNN 声学模型）并在输出上生成 one-hot 说话人标签（或说话人概率）。 D-vector 是这个 DNN 的最后一个隐藏层的平均激活值。因此，与 i-vector 框架不同，这对特征的分布没有任何假设（i-vector 框架假设 i-vector 或潜在变量具有高斯分布）。

因此，总而言之，这是从完全不同的方法或假设中提取的两个不同特征。我建议你阅读这些论文：

N。 Dehak、P. Kenny、R. Dehak、P. Dumouchel 和 P. Ouellet，“说话人验证的前端因素分析”，IEEE Transactions on Audio、Speech, and Language Processing，第一卷。 19，没有。 4，第 788-798 页，2011 年。

E. Variani、X. Lei、E. McDermott、I. L. Moreno 和 J. G-Dominguez，“用于小尺寸文本相关说话人验证的深度神经网络”，Proc。 ICASSP，2014 年，第 4080-4084 页。