DAV数字音视工程网_会议系统、指挥调度、演艺科技、智能楼宇等音视频工程信息行业门户

DAV首頁
數字音視工程網

微信公眾號

數字音視工程網

手機DAV

null
null
null
卓華,
招商,
null
null
null
快捷,
null

我的位置:

share

麥克風陣列的語音信號處理技術

來源:數字音視工程網        編輯:胡燕    2017-07-20 09:24:50     加入收藏    咨詢

咨詢
所在單位:*
姓名:*
手機:*
職位:
郵箱:*
其他聯系方式:
咨詢內容:
驗證碼:
不能為空 驗證碼錯誤
確定

麥克風陣列技術相對于單麥克風系統有很多優點,已成為語音增強及語音信號處理的重要部分。語音增強和聲源定位已經成為陣列技術中不可缺少的部分,在視頻會議,智能機器人,助聽器,智能家電,通信,智能玩具,車載領域都需要聲源定位和語音增強。

  隨著人工智能與人們的生活越來越近,語音技術的發展也備受關注。傳統的近場語音已經無法滿足人們的需求,人們希望可以在更遠的距離,更復雜的環境中語音控制智能設備。因此,陣列技術成為遠場語音技術的核心。

  陣列麥克風對人工智能的意義:

  空間選擇性:通過電掃陣列等空間定位技術可以獲取聲源的有效位置,智能設備在獲取精準的聲源位置信息,讓我們的語音更加智能,通過算法獲取高品質的語音信號質量。

  麥克風陣列可以自動檢測聲源位置,跟蹤說話人,同時可以獲取多聲源和跟蹤移動聲源的優勢,無論你走到任何位置,智能設備都會對你的位置方向進行語音增強。

  陣列麥克風增加了空域處理,對多信號空時頻三維的處理彌補單信號在噪聲抑制,回聲抑制,混響抑制,聲源定位,語音分離方面的不足,讓我們的智能設備在復雜的環境中都可以獲取高質量的語音信號,提供更好的智能語音體驗。

  麥克風陣列技術的技術難點:

  傳統的陣列信號處理技術直接應用到麥克風陣列處理系統中往往效果不理想,其原因在于麥克風陣列處理有不同的處理特點:

  陣列模型的建立

  麥克風主要應用處理語音信號,拾音范圍有限,且多用于近場模型,使得常規的陣列處理方法如雷達,聲吶等平面波遠場模型不再適用,在近場模型中,需要更加精準的球面波,需要考慮傳播路徑不同引起的幅度衰減不同。

  寬帶信號處理

  通常的陣列信號處理多為窄帶,即不同陣元在接受時延與相位差主要體現在載波頻率,而語音信號未經過調制也沒有載波,且高低頻之比較大,不同陣元的相位延時與聲源本身的特性關系很大—頻率密切相關,使得傳統的陣列信號處理方法不再完全適用。

  非平穩信號處理

  傳統陣列處理中,多為平穩信號,而麥克風陣列的處理信號多是非平穩信號,或者短時平穩信號,因此麥克風陣列一般對信號做短時頻域處理,每個頻域均對應一個相位差,將寬帶信號在頻域上分成多個子帶,每個子帶做窄帶處理,再合并成寬帶譜。

  混響

  聲音傳播受空間影響較大,由于空間反射,衍射,麥克風收到的信號除了直達信號以外,還有多徑信號疊加,使得信號被干擾,即為混響。在室內環境中,受房間邊界或者障礙物衍射,反射導致聲音延續,極大程度的影響語音的可懂度。

  聲源定位

  聲源定位技術在人工智能領域應用廣泛,利用麥克風陣列來形成空間笛卡爾坐標系,根據不同的線性陣列,平面陣列和空間陣列,來確定聲源在空間中的位置。智能設備首先可以對聲源的位置做進一步的語音增強,當智能設備獲取你的位置信息可以結合其他的傳感器進行進一步的智能體驗,比如機器人會聽到你的呼喚走到你的身邊,視頻設備會聚焦鎖定說話人等等。了解聲源定位技術之前,我們需要了解近場模型和遠場模型。

  近場模型和遠場模型

  通常麥克風陣列的距離為1~3m,陣列處于近場模型,麥克風陣列接受的是球面波而不是平面波,聲波在傳播的過程中會發生衰減,而衰減因子與傳播的距離成正比,因此聲波從聲源到達陣元時候的幅度也各不相同。而遠場模型中,聲源到陣元的距離差相對較小,可以忽略。通常,我們定義2L²/λ為遠近場臨界值,L為陣列孔徑,λ為聲波波長,因此陣元接受信號不僅有相位延時還有幅度衰減。

  聲源定位技術

  聲源定位的方法包括波束形成,超分辨譜估計和TDOA,分別將聲源和陣列之間的關系轉變為空間波束,空間譜和到達時間差,并通過相應的信息進行定位。

  電掃陣列

  通過陣列形成的波束在空間掃描,根據不同角度的抑制不同來判斷方向。通過控制各個陣元的加權系數來控制陣列的輸出指向,進行掃描。當系統掃描到輸出信號功率最大時所對應的波束方向就是認為是聲源的DOA方向,從而可以聲源定位。電掃陣列的方式存在一定的局限,僅僅適用于單一聲源。若多聲源在陣列方向圖的同一主波束內,則無法區分。而這種定位精度和陣列寬度有關—在指定頻率下,波束寬度和陣列孔徑成反比,所以大孔徑的麥克風陣列在很多場合的硬件上很難實現。

  超分辨譜估計

  如MUSIC,ESPRIT等,對其協方差矩陣(相關矩陣)進行特征分解,構造空間譜,關于方向的頻譜,譜峰對應的方向即為聲源方向。適合多個聲源的情況,且聲源的分辨率與陣列尺寸無關,突破了物理限制,因此成為超分辨譜方案。這類方法可以拓展到寬帶處理,但是對誤差十分敏感,如麥克風單體誤差,通道誤差,適合遠場模型,矩陣運算量巨大。

  TDOA

  TDOA是先后估計聲源到達不同麥克風的時延差,通過時延來計算距離差,再利用距離差和麥克風陣列的空間幾何位置來確定聲源的位置。分為TDOA估計和TDOA定位兩步:

  1. TDOA估計

  常用的有廣義互相關GCC,Generalized Cross Correlation和LMS自適應濾波

  廣義互相關

  基于TDOA的聲源定位方法中,主要用GCC來進行延時估計。GCC計算方法簡單,延時小,跟蹤能力好,適用于實時的應用中,在中等嘈雜強度和低混響噪聲情況下性能較好,在嘈雜非穩態噪聲環境下定位精度會下降。

  LMS自適應濾波

  在收斂的狀態下給出TDOA的估值,不需要噪聲和信號的先驗信息,但是對混響較為敏感。該方法將兩個麥克風信號作為目標信號和輸入信號,用輸入信號去逼近目標信號,通過調整濾波器系數得到TDOA。

  2. TDOA定位

  TDOA估值進行聲源定位,三顆麥克風陣列可以確定空間聲源位置,增加麥克風會增高數據精度。定位的方法有MLE最大似然估計,最小方差,球形差值和線性相交等。TDOA相對來講應用廣泛,定位精度高,且計算量最小,實時性好,可用于實時跟蹤,在目前大部分的智能定位產品中均采用TDOA技術做為定位技術。

  波束形成:

  波束形成可分為常規的波束形成CBF,Conventional Beam Forming和自適應波束形成ABF,Adaptive Beam Forming。CBF是最簡單的非自適應波束形成,對各個麥克風的輸出進行加權求和得到波束,在CBF中,各個通道的權值是固定的,作用是抑制陣列方向圖的旁瓣電平,以濾除旁瓣區域的干擾和噪聲。ABF在CBF的基礎之上,對干擾和噪聲進行空域自適應濾波。ABF中,采用不同的濾波器得到不同的算法,即不同通道的幅度加權值是根據某種最優準則進行調整和優化。如LMS,LS,最大SNR,LCMV(線性約束最小方差,linearly constrained Minimum Variance)。采用LCMV準則得到的是MVDR波束形成器(最小方差無畸變響應,Minimum Variance Distortionless Response)。LCMV的準則是在保證方向圖主瓣增益保持不變的情況下,使陣列的輸出功率最小,表明陣列輸出的干擾加噪聲功率最小,也可以理解為是最大SINR準則,從而能最大可能的接收信號和抑制噪聲和干擾。

  CBF-傳統的波束形成

  延時求和的波束形成方法用于語音增強,對麥克風的接收信號進行延時,補償聲源到每個麥克風的時間差,使得各路輸出信號在某一個方向同相,使得該方向的入射信號得到最大的增益,使得主波束內有最大輸出功率的方向。形成了空域濾波,使得陣列具有方向選擇性。

  CBF + Adaptive Filter 增強型波束形成

  結合Weiner濾波來改善語音增強的效果,帶噪語音經過Weiner濾波得到基于LMS準則的純凈語音信號。而濾波器系數可以不斷更新迭代,與傳統的CBF相比,可以更有效的去除非穩態噪聲。

  ABF-自適應波束形成

  GSLC是一種基于ANC主動噪聲對消的方法,帶噪信號同時通過主通道和輔助通道,而輔助通道的阻塞矩陣將語音信號濾除,得到僅包含多通道噪聲的參考信號、各通道根據噪聲信號得到一個最優信號估計,得到純凈語音信號估計。

  陣列技術的未來發展

  麥克風陣列技術相對于單麥克風系統有很多優點,已成為語音增強及語音信號處理的重要部分。語音增強和聲源定位已經成為陣列技術中不可缺少的部分,在視頻會議,智能機器人,助聽器,智能家電,通信,智能玩具,車載領域都需要聲源定位和語音增強。各種信號處理技術,陣列信號處理技術都陸續結合到麥克風陣列的語音處理系統當中,并逐漸得到算法改進和進一步的廣泛應用。在復雜的噪聲環境,混響環境,聲學環境下,強大的硬件處理能力也使得復雜算法實時處理語音增強成為了可能。在未來,語音和圖像的緊密結合會成為人工智能領域的新的突破口,在人工智能的風口浪尖,是誰能將語音識別,語音理解,陣列信號處理,遠場語音,圖像識別,人臉識別,虹膜識別,聲紋識別的技術巧妙并有機的結合在一起,并將技術的本質和與人為本的宗旨完美的結合,讓我們拭目以待。

免責聲明:本文來源于網絡收集,本文僅代表作者個人觀點,本站不作任何保證和承諾,若有任何疑問,請與本文作者聯系或有侵權行為聯系本站刪除。(原創稿件未經許可,不可轉載,轉載請注明來源)
掃一掃關注數字音視工程網公眾號

相關閱讀related

評論comment

 
驗證碼:
您還能輸入500
    主站蜘蛛池模板: 绣花厂_电脑绣花厂_手工刺绣加工定制 - 北京丽绣坊工艺品有限公司 | 木马交互设计研究中心 ,专注于用户体验与人机交互设计 - 首页 | 聚氨酯碰头,聚氨酯托辊,聚氨酯地辊/地滚轮/地轮/托绳轮-济宁卓力聚氨酯制品有限公司 | 惠声电子、广州市惠声电子科技有限公司、VBS、VBS惠声电子、VBS公共广播生产厂家、VBS广播功放生产厂家、VBS会议系统设备批发、VBSIP网络对讲系统厂家、VBS会议系统厂家、VBS智能中控厂家、VBS专业扩声厂家 | 新中式家具,广东新中式家具,广州新中式家具,佛山新中式家具,顺德新中式家具,乐从新中式家具,新中式家具厂家直销--唐明雅居 | 免费的PPT幻灯片演示制作软件,动画视频及课件制作软件 - Focusky万彩演示大师官网 | 金相切割机-金相磨抛机-显微/维氏/布氏/洛氏硬度计-自准直仪-金相显微镜-万能材料试验机-清洁度检测仪-淋雨试验机-上海中研精密仪器制造有限公司 | 组合式空调机组-吊顶式新风换气机-消防高温排烟风机-德州宏楚空调设备有限公司 | 门禁控制器-自动道闸-停车场系统-车位引导系统-车牌识别系统-楼宇对讲-可视门铃-门禁一卡通-河北京鹏电子科技有限公司 | 水泥纤维瓦机 石棉瓦机 硅酸钙板生产线 | 氧化膜测厚仪-瓶壁测厚仪-QNIX菲尼克斯膜厚仪-深圳市时代之峰科技有限公司 | 无塔供水设备_无负压供水设备_变频供水设备_净化过滤设备_加油站油罐_S/F双层油罐_开封市东方供水设备有限公司 | 天津止回阀-止回阀报价/哪家好-天津蝶阀/进口阀门/通风蝶阀批发-闸阀阀门/球阀生产厂家-天津凯维斯阀门制造 | 新中式家具,广东新中式家具,广州新中式家具,佛山新中式家具,顺德新中式家具,乐从新中式家具,新中式家具厂家直销--唐明雅居 | 开关柜无线测温_电缆接头测温系统_六氟化硫sf6气体泄漏报警监测_卫星同步时钟-山东正瑞电子有限公司 | 热电偶_电磁流量计_温度传感器_涡轮流量计_铠装PT100_压力变送器-中瑞能 | 深圳起重机,龙门吊,天车起重工程,电动葫芦,液压升降货梯-深圳市德力起重机械有限公司 | 气体检测仪_气体传感器_可燃气体检测仪-精讯畅通电子科技 | 苏州注册公司-代理工商注册-苏州及财企业服务有限公司 | 苏子富春品牌馆 抚顺市富春农业科技开发有限公司 抚顺特色农产品 抚顺市特色馆 | 真空上料机_加料机_天津自动上料机_投料站_包装机加料_吸料机_粉体称重-天津市飞云粉体设备有限公司 | 天之水网_新时代主流门户网站 十大文明网,主流新媒 、 值得信赖、关注我、温暖你! | 机械配件加工_数控车床加工_零件加工_精密件加工_cnc加工定制—深圳精密机械加工 | 烟台蓝天投资开发有限公司 | 气体泄漏检测仪,COD水质分析仪,RD8200管线探测仪-成都恒通兴业科技有限责任公司 | 锯骨机-砍排机-全自动锯骨机-商用砍排机-切丁机 - 广州市九盈机械设备有限公司 | 江西蔬菜配送,南昌蔬菜配送,南昌食堂承包,江西饭堂承包-江西菜篮子农产品发展有限公司 | 江门市金环电器有限公司 | 前海卡的物联智能技术(深圳)有限公司 | 潍坊亿宏重工机械有限公司,破碎机,高性能立磨机,颚式破碎机,锤式破碎机反击式破碎机,重锤式破碎机,高性能反击式破碎机,圆锥式破碎机,给料机系列,链板给料机系列,简易给料机系列,振动给料机 | 徐州护栏,铝艺栏杆,铝艺大门,铝艺栏杆门,别墅铝艺大门-徐州桂丰金属科技有限公司 | 螺旋叶片_叶片成型机_叶片冷轧机-深州市广兴五金机械制造有限公司 | 中华收藏网-中藏网-藏品拍卖|字画拍卖|艺术品拍卖|古玩城|收藏资讯|古玩交易|书画定制 | 深圳注册公司-工商注册代理-深圳注册公司流程及费用-记帐报税-公司注销-[深圳市悟空企业管理(深圳)有限公司] | 叶片泵,液压电机,油泵电机,变量叶片泵,油压电机-广东俊泰液压科技有限公司 | 呼吸家官网|肺功能检测仪生产厂家|国产肺功能仪知名品牌|肺功能检测仪|肺功能测试仪|婴幼儿肺功能仪|弥散残气肺功能仪|肺功能测试系统|广州红象医疗科技有限公司|便携式肺功能仪|大肺功能仪|呼吸康复一体机|儿童肺功能仪|肺活量计|医用简易肺功能仪|呼吸康复系统|肺功能仪|弥散肺功能仪(大肺)|便携式肺功能检测仪|肺康复|呼吸肌力测定肺功能仪|肺功能测定仪|呼吸神经肌肉刺激仪|便携式肺功能 | 绿树海棠苗木网-苗木基地-苗木求购-苗木价格-苗圃苗木专业平台 | 排污管道疏通_长沙消防管道/暗管网漏水检测维修_长沙雨水管道疏通就找湖南鸿磊环保工程有限公司 排水PVC管-PVC排污管-给水PVC管-电线PVC管-米阳建材pvc管厂 | 压滤机入料泵_渣浆泵_耐磨污水泵_保定森力克水泵制造有限公司 | 全自动贴标机厂家-深圳市优斯迪自动贴标机官网 | 南尔智能科技 南尔 小南管家 智慧中控屏 智能语音面板 - 深圳市南尔智能科技有限公司 |