Employing low-pass filtered temporal speech features for the training of ideal ratio mask in speech enhancement
1051Authors
nan
Abstract
AbstractThe masking-based speech enhancement method pursues a multiplicative mask that applies to the spectrogram of input noise-corrupted utterance, and a deep neural network (DNN) is often used to learn the mask. In particular, the features commonly used for automatic speech recognition can serve as the input of the DNN to learn the well-behaved mask that significantly reduce the noise distortion of processed utterances. This study proposes to preprocess the input speech features for the ideal ratio mask (IRM)-based DNN by lowpass filtering in order to alleviate the noise components. In particular, we employ the discrete wavelet transform (DWT) to decompose the temporal speech feature sequence and scale down the detail coefficients, which correspond to the high-pass portion of the sequence. Preliminary experiments conducted on a subset of TIMIT corpus reveal that the proposed method can make the resulting IRM achieve higher speech quality and intelligibility for the babble noise-corrupted signals compared with the original IRM, indicating that the lowpass filtered temporal feature sequence can learn a superior IRM network for speech enhancement.
Keywords
Full Content
������������������������� ��������� �������� ������� �������� ������ �������� ��� ��� �������� �� ����� ����� ���� �� ������ ����������� �������� ����� ��� �������� ��� ��� ���������� �������� ���������������������������� �������� ���� ��� �������� ��� ��� ���������� �������� ��������������������� ��������� ����� ��� �������� ��� ��� ���������� �������� ������������������ �� ������������������ �� ��������������� �������� ������������������ ������������������ ������������������ ������������������ ������������������ ������������������ ������������������ ������������������ ����������������� ������������������ ������������������ ������������������ ������������������ ������������������ ������������������ ������������������ ������������������ ������������������ ������������������ ���������� �������� ��� ������������� ������ ����������� ������ ������� � �������������� ���� ���� ������� �� ��� ����������� �� ����� ������ ��������� ���������� ��� � ���� ������ ���� ���� ����� �� ����� ���� �� ����� ��� ����� �� ����������� ��� �������� ���� ����� ���� ��� ��������� ������ �������� ���� ��� ����� �� ��� ����� �� ��� ��� �� ����� ��� ������������ ���� ���� ������� ������� ������ ��� ����� ���������� �� ���� ������ ����������� ���� ����� �������� �� ���������� ��� ����� ������ �������� ��� ��� ����� ����� ���� ����������� ��� �� ������� �������� �� ����� �� ��������� ��� ����� ����������� �� ����������� �� ��� ���� ��� �������� ������� ��������� ����� �� ��������� ��� �������� ������ ������� �������� ��� ����� ���� ��� ������ ����� ������� ����� ���������� �� ��� ��������� ������� �� ��� ��������� ����������� ��� ��������� ��������� �� � ������ �� ����� ������ ������ ���� ��� �������� ������ ��� ���� ��� ��������� ��� ������� ������ ������ ������� ��� ��������������� ��� ��� ������ ��������������� ������� �������� ���� ��� �������� ���� ���������� ���� ��� ������� ������� �������� ������� �������� ��� ����� � �������� ��� ������� ��� ������ ������������ ������������������ �������������� ��������� ������ ������������ ������ ��� ������� ��������� ������� ��������� ����� ��� ��� ����� ������� ��������� � �� �������������������� �������������������� �������������������� �������������������� �������������������� �������������������� �������������������� �������������������� �������������������� �������������������� �������������������� �������������������� �������������������� �������������������� �������������������� �������������������� �� ����������� ������������ �������������������� ������� ���� ����� �� ���� ����������� ������������������ ������������ ��������� �� �� ��������������������� The 33rd Conference on Computational Linguistics and Speech Processing (ROCLING 2021) Taoyuan, Taiwan, October 15-16, 2021. The Association for Computational Linguistics and Chinese Language Processing 236 ������������������ ���� ��������������� � ������������� ������� ��������� ��������������� ��������� ������������������ ������������������� ������������������� ������������������� ������������������� ������������������� ������� ������������� ������������������� ����� ������ ������ ����� ���� ����� �� ���� ����� ���������� �� ���� ��������� ��� ������ ����� ����� ���� ����������� �� ���� ������������ ��������� ���� ������ ����� ���� ����� �� ���� ������� ������� �������� ����� ����� ����� ����� ����������� �� ���� ����������� �� ���������������� ����� ���� �������� �� ���� ����� �� ������������������� ������������������� ������������������� �� �������������������������� ������������������� ������������������� ������� ��������� ������� ���������� ������������ ��������������� ������ ����������� ��������� ������� ������������������� ������������������� ������������� �������� ���� ����� ������� ���������� ����� ����� �������������������� ������������������� ������ ������� ��� ���������� ����� ���� ��� ������� �������������� �������� � �� � �� �� ����� ������� ��� �� ��������� ��������� ����� ��������� �������������������� �������������������� ������ ����� �� ���� ����� ����� �������������������� � ������� ��������������������� �������������������� �������������������� �������������������� ������������������� �� � ������ ������������������� ����� ������ ����� ����� ���� ���� ������������� ������������� ������ ������������� ������� �� M(m, f) = |s(m, f)|2 |s(m, f)|2 + |d(m, f)|2 ��� ���|s(m, f)|2 � |d(m, f)|2 ����� ������������������� m ��� …
Content truncated to 500 words
Labeled Text
AbstractThe masking-based speech enhancement method pursues a multiplicative mask that applies to the spectrogram of input noise-corrupted utterance, and a deep neural network (DNN) is often used to learn the mask. In particular, the features commonly used for automatic speech recognition can serve as the input of the DNN to learn the well-behaved mask that significantly reduce the noise distortion of processed utterances. This study proposes to preprocess the input speech features for the ideal ratio mask (IRM)-based DNN by lowpass filtering in order to alleviate the noise components. In particular, we employ the discrete wavelet transform (DWT) to decompose the temporal speech feature sequence and scale down the detail coefficients, which correspond to the high-pass portion of the sequence. Preliminary experiments conducted on a subset of TIMIT corpus reveal that the proposed method can make the resulting IRM achieve higher speech quality and intelligibility for the babble noise-corrupted signals compared with the original IRM, indicating that the lowpass filtered temporal feature sequence can learn a superior IRM network for speech enhancement.
Publication Details
- Paper ID:
- 1051
- Year:
- 2021
- Publication:
- TIPSTER
- Publication Type:
- conf
- DOI:
- nan