有声无声判定装置和有声无声判定方法

具体实施方式

第一实施方式

参考附图说明根据本发明第一实施方式的有声无声判定装置。

首先，说明根据本实施方式的有声无声判定装置的结构。图1是根据本实施方式的有声无声判定装置的结构图。

根据本实施方式的有声无声判定装置1物理上作为计算机系统来构成，具备CPU(中央处理器)、存储器、鼠标或键盘等输入装置、显示器等显示装置、硬盘等存储装置、通过无线和外部设备进行数据通信的无线通信单元等。在功能上，如图1所示，有声无声判定装置1具有自相关计算部11(自相关计算单元)，延迟计算部12(延迟计算单元)，杂音判定部13(性质判定单元)，有声无声判定部14(有声无声判定单元)。以下，详细说明有声无声判定装置1的各构成要素。

自相关计算部11计算输入信号的自相关值。具体地说，有声无声判定装置1根据以下的式(1)算出输入信号x(t)的自相关值c(t)。

$>>c>>(>t>)>>=>>>>\Sigma >>n>=>0>>>N>->1>\; >x>>(>n>)>>x>>(>n>->t>)>>>>>>\Sigma >>n>=>0>>>N>->1>\; >>x>2>>>(>n>)>\; >>>\Sigma >>n>=>0>>>N>->1>\; >>x>2>>>(>n>->t>)>\; >\; >·>·>·>>(>1>)>>>s>$

这里，x(n)(n＝0，1，...，N)是在经过一定时间(例如20msec)后每隔一定时间间隔(例如1/8000sec)对x(t)采样得到的第n个值。对于自相关值c(t)，也是作为在一定时间(例如18msec)后每隔一定时间间隔(例如1/8000sec)的离散值而得到。

此外，自相关计算部11不一定严密地按上述式(1)算出自相关值。例如，自相关计算部11也可以基于广泛用于声音编码过程中的带听觉加权的输入信号而算出自相关值。自相关计算部11也可以对基于输入信号算出的自相关值进行加权，输出带加权的自相关值。

延迟计算部12算出使由自相关计算部11计算的自相关值为极大的多个延迟。具体地说，延迟计算部12扫描预定的延迟观测区间内的自相关值，按照从大到小的顺序算出M个自相关值为极大的延迟。即，如图2所示，在延迟观测区间min_t～max_t(例如AMR时为18～143)内，依次算出使自相关值为极大的延迟中的自相关值最大的延迟t_max1，使自相关值为极大的延迟中自相关值第二大的延迟t_max2，使自相关值为极大的延迟中自相关值第三大的延迟t_max3(这里，以M＝3进行说明)。

返回图1，杂音判定部13基于延迟计算部12算出的多个延迟判定输入信号是否为杂音(输入信号的性质)。例如，杂音判定部13利用延迟计算部12算出的多个延迟t_maxi(1≤i≤M)的时间变动t_maxi(k)(1≤i≤M，1≤k≤K)判定输入信号是否为杂音。这里，k是表示时间的从属变量。更具体地说，在满足式(2)所示条件的状态持续一定时间的情况下(如果定性地说，是延迟变动小的状态持续一定时间时)，杂音判定部13判定输入信号不是杂音。相反，在满足式(2)所示条件的状态不持续一定时间的情况下杂音判定部13判定输入信号是杂音。

$>>>>Min>>i>=>1>~>M>\; >>j>=>1>~>M>\; >\{>|>t>\_>max>\; i>>(>k>)>>->t>\_>max>\; j>>(>k>->1>)>>|>\}>\le >d>·>·>·>>(>2>)>>>s>$

此外，式(2)中，d是预定的阈值。这里，杂音判定部13也可以以基于多个延迟判定输入信号是否为杂音为条件，用上述过程以外的过程判定输入信号是否为杂音。

有声无声判定部14基于杂音判定部13的判定结果和输入信号判定输入信号有声或无声。例如，有声无声判定部14用杂音判定部13的判定结果和输入信号的分析结果(功率，谱包络，过零数等)，判定输入信号有声还是无声。这里，作为用杂音判定部13的判定结果和输入信号的分析结果判定输入信号有声或无声的方法，可以采用广为人知的种种方法。这里，所谓“无声”是指作为信息没有意义的声音，相当于背景杂音等。另一方面，所谓“有声”是指作为信息有意义的声音，相当于人声和音乐等。

接着，说明根据本实施方式的有声无声判定装置的操作以及根据本发明实施方式的有声无声判定方法。图3是根据本实施方式的有声无声判定装置的操作流程图。

当在有声无声判定装置1中输入输入信号时，首先，通过自相关计算部11算出输入信号的自相关值(S11)。具体地说，根据上述式(1)，算出输入信号x(t)的自相关值c(t)。

当通过自相关计算部11算出输入信号的自相关值时，通过延迟计算部12算出使自相关计算部11计算出的自相关值为极大的多个延迟(S12)。具体地说，扫描预定的延迟观测区间内的自相关值，按照从大到小的顺序算出M个自相关值为极大的M个延迟(延迟t_max1～t_maxM)。

当通过延迟计算部12算出多个延迟时，基于判定延迟计算部12算出的多个延迟，通过杂音判定部13判定输入信号是否为杂音(输入信号的性质)(S13)。具体地说，满足上述式(2)所示条件的状态持续一定时间时，判定为输入信号不是杂音。相反，满足式(2)所示条件的状态不持续一定时间时，判定输入信号是杂音。

当杂音判定部13判定输入信号是否为杂音时，基于杂音判定部13的判定结果和输入信号，有声无声判定部14判定输入信号是有声或无声(S14)。具体地说，例如，用杂音判定部13的判定结果和输入信号的分析结果(功率，谱包络，过零数等)，判定输入信号是有声还是无声。

接着，说明根据本实施方式的有声无声判定装置的作用和效果。根据本实施方式的有声无声判定装置1的延迟计算部12算出自相关值为极大的多个延迟t_max1～t_maxM，杂音判定部13基于这多个延迟t_max1～t_maxM判定输入信号是杂音还是非杂音，有声无声判定部14基于杂音判定部13的判定结果判定输入信号是有声还是无声。因此，可以考虑输入信号中包含的多个周期分量来判定有声或无声。结果，即使对于非周期分量多的信号和多个不同周期分量混合的输入信号，也能精确地判定有声区间或无声区间。

本实施方式的有声无声判定装置1的有声无声判定部14不仅利用杂音判定部13的判定结果、还利用输入信号来判定该输入信号是有声还是无声。因此，和仅利用杂音判定部13的判定结果判定输入信号有声或无声的情况相比，可以嵌入更细致的判定过程。即，例如，可以嵌入杂音判定部13判定为杂音但输入信号的历史满足一定条件时判定为有声的判定过程。此外，有声无声判定部14在不用输入信号的分析结果的情况下，仅用杂音判定部13的判定结果也可以判定输入信号是有声还是无声。这时，虽然不能嵌入上述更细致的判定过程，但具有将有声或无声的判定过程变简单的效果。

在根据本实施方式的有声无声判定装置1中，当延迟计算部12算出多个延迟时，按照自相关值从大到小的顺序计算多个延迟。因此，和采用其他计算方法的情况相比，可以容易地算出多个延迟。

第二实施方式

接着，参考附图说明根据本发明第二实施方式的有声无声判定装置。首先，说明根据本实施方式的有声无声判定装置的构成。图4是根据本实施方式的有声无声判定装置的构成图。根据本实施方式的有声无声判定装置2和上述根据第一实施方式的有声无声判定装置1的不同之处在于还具有从输入信号中推定杂音的杂音推定部21(杂音推定装置)，有声无声判定部22利用该杂音推定部21推定的杂音判定输入信号有声或无声。

在功能上，如图4所示，有声无声判定装置2具有自相关计算部11，延迟计算部12，杂音判定部13，杂音推定部21和有声无声判定部22。这里，自相关计算部11，延迟计算部12和杂音判定部13具有的功能分别和根据第一实施方式的有声无声判定装置1中的自相关计算部11、延迟计算部12和杂音判定部13相同。

杂音推定部21从输入信号中推定杂音。具体地说，杂音推定部21例如根据下述式(3)推定杂音。

noise_m+1(n)＝(1-α)·noise_m(n)+α·input_m-1(n)  ...(3)

这里，noise是推定杂音，input是输入信号，n是表示频带的指数，m是表示时刻(帧)的指数，α是系数。即，noisem(n)表示第n个频带内时刻(帧)m的推定杂音。这里，杂音推定部21根据杂音判定部13的判定结果改变上述式(3)的系数α。即，杂音判定部13判定输入信号不是杂音时，杂音推定部21使上述式(3)的系数α为0或者接近0的值α1，以便不增大推定杂音功率。另一方面，杂音判定部13判定输入信号为杂音时，杂音推定部21使上述式(3)的系数α为1或者接近1的值α2(α2＞α1)，以便使推定杂音接近输入信号。此外，杂音推定部21也可以用上述过程以外的过程从输入信号中推定杂音。

有声无声判定部22基于杂音判定部13的判定结果、输入信号以及杂音推定部21推定的杂音，判定输入信号有声或无声。具体地说，例如，有声无声判定部22根据杂音推定部21推定的杂音和输入信号算出S/N比(更准确地说是各频带的S/N比的累计值或平均值)。有声无声判定部22把算出的S/N比和预定的阈值相比较，S/N比大于阈值时，判定为输入信号是有声的，S/N比小于或等于阈值时，判定为输入信号是无声的。这里，上述阈值设定成随杂音判定部13的判定结果的不同而不同。即，杂音判定部13判定为“非杂音”时的阈值设定得比杂音判定部13判定为“杂音”时的阈值低。这样，杂音判定部13判定为“非杂音”时，S/N比小的信号(即埋在杂音中的信号)也作为“有声”被提取出来的可能性高。此外，有声无声判定部22也可以用上述过程以外的过程判定有声或无声。即，例如，利用上述阈值，无论杂音判定部13的判定结果如何，有声无声判定部22一律基于输入信号和杂音推定部21推定的杂音来判定输入信号有声或无声。

接着，说明根据本实施方式的有声无声判定装置的操作。图5是根据本实施方式的有声无声判定装置的操作流程图。这里，自相关值的计算(S11)、延迟t_max1～t_maxM的计算(S12)和杂音、非杂音的判定(S13)与根据第一实施方式的有声无声判定装置1的操作相同。

接着步骤S11～S13，通过杂音推定部21根据输入信号推定杂音(S21)。具体地说，根据上述式(3)，推定杂音。这里，上述式(3)的系数α随杂音判定部13的判定结果来变化。即，杂音判定部13将输入信号判定为不是杂音时，将上述式(3)的系数α设定为0或者接近0的值α1，以便不增加推定杂音功率。另一方面，杂音判定部13将输入信号判定为杂音时，将上述式(3)的系数α设定为1或者接近1的值α2(α2＞α1)，以便使推定杂音接近输入信号。此外，杂音的推定(S21)不限于步骤S11～S13结束后，和步骤S11～S13并行进行也可以。

当通过杂音推定部21推定杂音时，有声无声判定部22基于杂音判定部13的判定结果、输入信号以及杂音推定部21推定的杂音，判定输入信号有声或无声(S22)。具体地说，例如，根据杂音推定部21推定的杂音和输入信号算出S/N比，将算出的S/N比和预定的阈值相比较。这里，S/N比大于阈值时，判定为输入信号是有声的，S/N比小于或等于阈值时，判定为输入信号是无声的。

接着，说明根据本实施方式的有声无声判定装置的效果。根据本实施方式的有声无声判定装置2，除了具有根据上述实施方式的有声无声判定装置1的效果之外，还具有以下效果。即，有声无声判定装置2的杂音推定部21根据输入信号推定杂音，有声无声判定部22基于杂音判定部13的判定结果、输入信号以及杂音推定部21推定的杂音判定输入信号是有声还是无声。因此，可以基于S/N比高精度地判定有声无声。杂音推定部21根据杂音判定部13的判定结果改变杂音推定式(上述式(3))的系数α，从而，能更高精度地判定有声无声。

第三实施方式

接着，参考附图说明根据本发明第三实施方式的有声无声判定装置。图6是根据本实施方式得有声无声判定装置的构成图。根据本实施方式的有声无声判定装置3和上述根据实施方式2的有声无声判定装置2的不同之处在于：杂音推定部31基于有声无声判定部22的判定结果来改变杂音的推定方法。

从功能上看，如图6所示，有声无声判定装置3包括自相关计算部11，延迟计算部12，杂音判定部13，杂音推定部31和有声无声判定部22。这里，自相关计算部11、延迟计算部12、杂音判定部13和有声无声判定部22具有的功能分别和根据第二实施方式的有声无声判定装置2中的自相关计算部11、延迟计算部12、杂音判定部13和有声无声判定部22相同。

杂音推定部31和有声无声判定装置2中的杂音推定部21一样推定输入信号的杂音。但是，特别地，杂音推定部31基于有声无声判定部22的判定结果改变杂音的推定方法。具体地说，杂音推定部31首先根据上述式(3)推定杂音。之后，杂音推定部31将根据式(3)算出的杂音乘上根据有声无声判定部22的判定结果履历而决定的系数β后的值作为最终的杂音输出。例如，杂音推定部31的有声无声判定部22连续输出一定时间以上“有声”的判定结果时，将上述系数β作为小于1的值，产生信号，此外的情况下，使系数β为1。此外，杂音推定部31也可以用上述过程以外的过程改变杂音的推定方法。

根据本实施方式的有声无声判定装置3除了具有根据上述实施方式的有声无声判定装置2的效果之外，还具有以下效果。即，有声无声判定装置3基于有声无声判定部22的判定结果使杂音推定部31改变杂音的推定方法。因此，可以嵌入更细致的杂音推定过程。即，例如，有声无声判定部22连续判定为有声时，通过积极地降低杂音推定部31推定的杂音电平，相对于杂音来强调信号分量。

上述有声无声判定装置1、2和3的延迟计算部12可以按照以下过程算出多个延迟。即，延迟计算部12将延迟观测区间分割为多个区间，在这些区间中分别算出自相关值最大的延迟。这时，例如，把上述延迟观测区间的起点作为min_t，用2^i-1·min_t～2ⁱ·min_t(i是自然数)确定上述多个区间。

具体地说，如图7所示，延迟计算部12首先依次按区间宽度成倍增长而分割为多个区间，使得延迟观测区间min_t～max_t为min_t～2·min_t，2·min_t～4·min_t，4·min_t～8·min_t。之后，顺次算出区间min_t～2·min_t内自相关值为最大的延迟t_max1，区间2·min_t～4·min_t内自相关值为最大的延迟t_max2，区间4·min_t～8·min_t内自相关值为最大的延迟t_max3(这里，以M＝3来说明)。例如，AMR时，根据min_t是18，求出[18，35]、[36，71]、[72，143]各区间内自相关值为最大的延迟。

通过进行这样的区间分割，对于有周期性的信号，可以更有效地检测出与其2倍周期对应的延迟，可以更高精度地进行有声无声判定。

本发明例如在便携电话和因特网电话的通信中，用作有声无声判定装置，判定输入信号是包含声音的有声区间还是不需要发送信息得无声区间。

当然，以上说明的本发明的实施方式可以采用各种变形方式。这些变形方式不脱离本发明的主题和目的，下述请求范围旨在包含所有上述变形方式的技术内容。