《電子技術(shù)應(yīng)用》
您所在的位置:首頁 > 其他 > 設(shè)計(jì)應(yīng)用 > 面向多說話人分離的深度學(xué)習(xí)麥克風(fēng)陣列語音增強(qiáng)
面向多說話人分離的深度學(xué)習(xí)麥克風(fēng)陣列語音增強(qiáng)
2022年電子技術(shù)應(yīng)用第5期
張家揚(yáng)1,2,童 峰1,2,3,陳東升1,2,3,黃惠祥1,2
1.廈門大學(xué) 水聲通信與海洋信息技術(shù)教育部重點(diǎn)實(shí)驗(yàn)室,福建 廈門361005; 2.廈門大學(xué) 海洋與地球?qū)W院,福建 廈門361005;3.廈門大學(xué)深圳研究院,廣東 深圳518000
摘要: 隨著近年來人機(jī)語音交互場(chǎng)景不斷增加,利用麥克風(fēng)陣列語音增強(qiáng)提高語音質(zhì)量成為研究熱點(diǎn)之一。與環(huán)境噪聲不同,多說話人分離場(chǎng)景下干擾說話人語音與目標(biāo)說話人同為語音信號(hào),呈現(xiàn)類似的時(shí)、頻特性,對(duì)傳統(tǒng)麥克風(fēng)陣列語音增強(qiáng)技術(shù)提出更高的挑戰(zhàn)。針對(duì)多說話人分離場(chǎng)景,基于深度學(xué)習(xí)網(wǎng)絡(luò)構(gòu)建麥陣空間響應(yīng)代價(jià)函數(shù)并進(jìn)行優(yōu)化,通過深度學(xué)習(xí)模型訓(xùn)練設(shè)計(jì)麥克風(fēng)陣列期望空間傳輸特性,從而通過改善波束指向性能提高分離效果。仿真和實(shí)驗(yàn)結(jié)果表明,該方法有效提高了多說話人分離性能。
中圖分類號(hào): TN912.3
文獻(xiàn)標(biāo)識(shí)碼: A
DOI:10.16157/j.issn.0258-7998.212404
中文引用格式: 張家揚(yáng),童峰,陳東升,等. 面向多說話人分離的深度學(xué)習(xí)麥克風(fēng)陣列語音增強(qiáng)[J].電子技術(shù)應(yīng)用,2022,48(5):31-36.
英文引用格式: Zhang Jiayang,Tong Feng,Chen Dongsheng,et al. Deep learning microphone array speech enhancement for multiple speaker separation[J]. Application of Electronic Technique,2022,48(5):31-36.
Deep learning microphone array speech enhancement for multiple speaker separation
Zhang Jiayang1,2,Tong Feng1,2,3,Chen Dongsheng1,2,3,Huang Huixiang1,2
1.Key Laboratory of Underwater Acoustic Communication and Marine Information Technology Ministry of Education, Xiamen University,Xiamen 361005,China; 2.College of Ocean and Earth Sciences,Xiamen Univercity,Xiamen 361005,China; 3.Shenzhen Research Institute of Xiamen Univercity,Shenzhen 518000,China
Abstract: With the increase of human-computer voice interaction scenes in recent years, using microphone array speech enhancement to improve speech quality has become one of the research hotspots. Different from the ambient noise, the interfering speaker′s speech and the target speaker are the same speech signal in the multiple speaker separation scene, showing similar time-frequency characteristics, which poses a higher challenge to the traditional microphone array speech enhancement technology. For the multiple speaker separation scenario, the spatial response cost function of microphone array is constructed and optimized based on deep learning network. The desired spatial transmission characteristics of microphone array are designed through deep learning model training, so as to improve the separation effect by improving the beamforming performance. Simulation and experimental results show that this method effectively improves the performance of multiple speaker separation.
Key words : deep learning;microphone array;beamforming;LSTM

0 引言

    隨著人與機(jī)器之間的語言交互逐漸頻繁,更需要考慮噪聲、混響和其他說話人的干擾等引起語音信號(hào)質(zhì)量下降的因素對(duì)語音識(shí)別造成的影響,語音增強(qiáng)技術(shù)[1]可以有效地從受干擾的信號(hào)中提取純凈的語音,而麥克風(fēng)陣列比起單個(gè)麥克風(fēng)可以獲取更多的語音信息和時(shí)空特征,因而麥克風(fēng)陣列語音增強(qiáng)技術(shù)被廣泛應(yīng)用在智能家居、車載系統(tǒng)和音(視)頻會(huì)議等領(lǐng)域。

    麥克風(fēng)陣列對(duì)信號(hào)進(jìn)行空間濾波,可以增強(qiáng)期望方向上的信號(hào)并抑制方向性噪聲,實(shí)現(xiàn)語音增強(qiáng)。傳統(tǒng)麥陣語音增強(qiáng)算法;如形成固定波束的濾波累加波束形成算法(Filter-and-Sum Beamforming,F(xiàn)SB)[2],通過一定長(zhǎng)度的濾波器系數(shù)對(duì)多通道信號(hào)進(jìn)行濾波累加,實(shí)現(xiàn)了頻率無關(guān)的空間響應(yīng)特性,具有低復(fù)雜度、硬件容易實(shí)現(xiàn)等優(yōu)點(diǎn),但是對(duì)于具有方向性的噪聲效果不佳。




本文詳細(xì)內(nèi)容請(qǐng)下載:http://www.viuna.cn/resource/share/2000004272




作者信息:

張家揚(yáng)1,2,童  峰1,2,3,陳東升1,2,3,黃惠祥1,2

(1.廈門大學(xué) 水聲通信與海洋信息技術(shù)教育部重點(diǎn)實(shí)驗(yàn)室,福建 廈門361005;

2.廈門大學(xué) 海洋與地球?qū)W院,福建 廈門361005;3.廈門大學(xué)深圳研究院,廣東 深圳518000)




wd.jpg

此內(nèi)容為AET網(wǎng)站原創(chuàng),未經(jīng)授權(quán)禁止轉(zhuǎn)載。
主站蜘蛛池模板: 日本综合视频 | 久久久久88色偷偷免费 | 国产日韩欧美在线视频免费观看 | 亚洲性69影院在线观看 | 亚洲精品国产成人 | 日本xxxxxxxxx69中国 | 五月天综合激情 | 中文字幕精品在线观看 | 久久免费黄色 | 一级黄a | 国产韩国精品一区二区三区久久 | 一个人免费观看在线视频www | 国产成人网 | 成人国产一区二区 | 深夜福利在线免费观看 | 天天摸天天做天天爽水多 | 亚洲网在线 | 伊人中文字幕在线 | 久久免费特黄毛片 | 免费的三级毛片 | 成人精品视频 成人影院 | 亚洲欧美视频二区 | 国产精品午夜久久 | 奇米777狠狠色噜噜狠狠狠 | 国产一级特黄a大片99 | 久久99精品国产麻豆不卡 | 一级片黄色片 | 一本大道香蕉大无线视频 | 一级毛片特黄久久免费看 | 色迷迷网免费站视频在线观看 | 中国黄色一级大片 | 成人全黄三级视频在线观看 | 天堂亚洲欧美日韩一区二区 | 成人a大片高清在线观看 | 无人区理论片手机看片 | 亚洲乱亚洲乱妇13p 亚洲乱码尤物193yw在线播放 | xxx欧美hd| 欧美成人综合在线 | 奇米一二区 | 亚洲欧洲高清 | 污污网站免费入口链接 |