基於DSP與FPGA的機器人聲控系統設計方案

2021-01-08 電子產品世界

  1 引言

本文引用地址:http://www.eepw.com.cn/article/273867.htm

  機器人聽覺系統主要是對人的聲音進行語音識別並做出判斷,然後輸出相應的動作指令控制頭部和手臂的動作,傳統的機器人聽覺系統一般是以PC機為平臺對機器人進行控制,其特點是用一臺計算機作為機器人的信息處理核心通過接口電路對機器人進行控制,雖然處理能力比較強大,語音庫比較完備,系統更新以及功能拓展比較容易,但是比較笨重,不利於機器人的小型化和複雜條件下進行工作,此外功耗大、成本高。

  本次設計採用了性價比較高的數位訊號處理晶片TMS320VC5509作為語音識別處理器,具有較快的處理速度,使機器人在脫機狀態下,獨立完成複雜的語音信號處理和動作指令控制,FPGA系統的開發降低了時序控制電路和邏輯電路在PCB板所佔的面積,使機器人的"大腦"的語音處理部分微型化、低功耗。一個體積小、低功耗、高速度能完成特定範圍語音識別和動作指令的機器人系統的研製具有很大的實際意義。

  2 系統硬體總體設計

  系統的硬體功能是實現語音指令的採集和步進電機的驅動控制,為系統軟體提供開發和調試平臺。如圖1所示。

  

 

  系統硬體分為語音信號的採集和播放,基於DSP的語音識別,FPGA動作指令控制、步進電機及其驅動、DSP外接快閃記憶體晶片,JTAG口仿真調試和鍵盤控制幾個部分。工作流程是麥克風將人的語音信號轉化為模擬信號,在經過音頻晶片TLV320AIC23量化轉化成數位訊號輸入DSP.DSP完成識別後,輸出動作指令。

  FPGA根據DSP輸入的動作指令產生正確的正反轉信號和準確的脈衝給步進電機驅動晶片,驅動晶片提供步進電機的驅動信號,控制步進電機的轉動。片外 FLASH用於存儲系統程序和語音庫並完成系統的上電加載。JTAG口用於與PC機進行聯機在線仿真,鍵盤則用於參數調整和功能的切換。

  3 語音識別系統設計

  3.1 語音信號的特點

  語音信號的頻率成分主要分布在300~3400Hz之間,根據採樣定理選擇信號的採樣率為8 kHz。語音信號的一個特點在於他的"短時性",有時在一個短時段呈現隨機噪聲的特性,而另一段表現周期信號的特性,或二者兼而有之。語音信號的特徵是隨時間變化的,只有一段時間內,信號才表現穩定一致的特徵,一般來說短時段可取5~50 ms,因此語音信號的處理要建立在其"短時性"上[2],系統將語音信號幀長設為20 ms,幀移設為10 ms,則每幀數據為160×16 b。

  3.2 語音信號的採集和播放

  語音採集和播放晶片採用的是TI公司生產的TLV320AIC23B,TLV320AIC23B的模數轉換(ADC)和數模轉換(DAC)部件高度集成在晶片內部,晶片採用8 k採樣率,單聲道模擬信號輸入,雙聲道輸出。TLV320AIC23具有可編程特性,DSP可通過控制接口來編輯該器件的控制寄存器,而且能夠編譯 SPI,I2C兩種規格的接口,TLV320AIC23B與DSP5509的電路連接如圖2所示。

  

 

  DSP採用I2C口對TLV320AIC23的寄存器進行設置。當MODE=O時,為I2C規格的接口,DSP採用主發送模式,通過I2C口對地址為 0000000~0001111的11個寄存器進行初始化。I2C模式下,數據是分為3個8 b寫入的。而TLV320AIC23有7位地址和9位數據,也就是說,需要把數據項上面的最高位補充到第二個8 B中的最後一位。

  MCBSP串口通過6個引腳CLKX,CLKR,FSX,FSR,DR和CX與TLV320AIC23相連。數據經MCBSP串口與外設的通信通過DR和 DX引腳傳輸,控制同步信號則由CLKX,CLKR,FSX,FSR四個引腳實現。將MCBSP串口設置為DSP Mode模式,然後使串口的接收器和發送器同步,並且由TLV320AIC23的幀同步信號LRCIN,LRCOUT啟動串口傳輸,同時將發送接收的數據字長設定為32 b(左聲道16 b,右聲道16 b)單幀模式。

  3.3 語音識別程序模塊的設計

  為了實現機器人對非特定人語音指令的識別,系統採用非特定人的孤立詞識別系統。非特定人的語音識別是指語音模型由不同年齡、不同性別、不同口音的人進行訓練,在識別時不需要訓練就可以識別說話人的語音[2]。系統分為預加重和加窗,短點檢測,特徵提取,與語音庫的模式匹配和訓練幾個部分。

  3.3.1 語音信號的預加重和加窗

  預加重處理主要是去除聲門激勵和口鼻輻射的影響,預加重數字濾波H(Z)=1一KZ-1,其中是為預加重係數,接近1,本系統中k取0.95。對語音序列X(n)進行預加重,得到預加重後的語音序列

  x(n):x(n)=X(n)一kX(n一1) (1)

  系統採用一個有限長度的漢明窗在語音序列上進行滑動,用以截取幀長為20 ms,幀移設為10 ms的語音信號,採用漢明窗可以有效減少信號特徵的丟失。

  3.3.2 端點檢測

  端點檢測在詞與詞之間有足夠時間間隙的情況下檢測出詞的首末點,一般採用檢測短時能量分布,方程為:

  

 

  其中,x(n)為漢明窗截取語音序列,序列長度為160,所以N取160,為對於無音信號E(n)很小,而對於有音信號E(n)會迅速增大為某一數值,由此可以區分詞的起始點和結束點。

  3.3.3特徵向量提取

  特徵向量是提取語音信號中的有效信息,用於進一步的分析處理。目前常用的特徵參數包括線性預測倒譜係數LPCC、美爾倒譜係數MFCC等。語音信號特徵向量採用Mel頻率倒譜係數MFCC(Mel Frequency Cepstrum Coeficient的提取,MFCC參數是基於人的聽覺特性的,他利用人聽覺的臨界帶效應,採用MEL倒譜分析技術對語音信號處理得到MEL倒譜係數矢量序列,用MEL倒譜係數表示輸入語音的頻譜。在語音頻譜範圍內設置若干個具有三角形或正弦形濾波特性的帶通濾波器,然後將語音能量譜通過該濾波器組,求各個濾波器輸出,對其取對數,並做離散餘弦變換(DCT),即可得到MFCC係數。MFCC係數的變換式可簡化為:

  

 

  其中,i為三角濾波器的個數,本系統選P為16,F(k)為各個濾波器的輸出數據,M為數據長度。

  3.3.4 語音信號的模式匹配和訓練

  模型訓練即將特徵向量進行訓練建立模板,模式匹配即將當前特徵向量與語音庫中的模板進行匹配得出結果。語音庫的模式匹配和訓練採用隱馬爾可夫模型HMM (Hidden Markov Models),他是一種統計隨機過程統計特性的概率模型一個雙重隨機過程,因為隱馬爾可夫模型能夠很好地描述語音信號的非平穩性和可變性,因此得到廣泛的使用。

  HMM的基本算法有3種:Viterbi算法,前向一後向算法,Baum-Welch算法。本次設計使用Viterbi算法進行狀態判別,將採集語音的特徵向量與語音庫的模型進行模式匹配。Baum-Welch算法用來解決語音信號的訓練,由於模型的觀測特徵是幀間獨立的,從而可以使用Baum- Welch算法進行HMM模型的訓練。

  3.4 語音識別程序的DSP開發

  DSP的開發環境為CCS3.1及。DSP/BIOS,將語音識別和訓練程序分別做成模塊,定義為不同的函數,在程序中調用。定義語音識別器函數為int Recognizer(int Micin),識別結果輸出函數為int Result(void),語音訓練器函數為int Train(int Tmode,int Audiod),動作指令輸入函數為int Keyin(int Action)。

  語音識別器的作用是將當前語音輸入變換成語音特徵向量,並對語音庫的模板進行匹配並輸出結果,語音應答輸出函數將獲取的語音識別結果對應的語音應答輸出,語音訓練是將多個不同年齡、不同性別、不同口音的人語音指令輸入轉化為訓練庫的模板。為防止樣本錯誤,每個人的語音指令需要訓練2次,對於2次輸入用用歐氏距離去進行模式匹配,若2次輸入相似度達到95%,則加入樣本集。語音應答輸入函數是為每個語音庫中模板輸入對立的語音輸出,以達到語言應答目的。系統工作狀態為執行語言識別子程序,訓練時執行外部中斷,執行訓練函數,取得資料庫模板,訓練完畢返回。程序框圖如圖3所示。

  

 

  4 機器人的動作控制系統設計

  4.1 FPGA邏輯設計

  系統通過語音控制機器人頭部動作,頭部運動分為上下和左右運動2個自由度,需要2個步進電機控制,DSF完成語音識別以後,輸出相應的動作指令,動作執行結束後,DSP發出歸零指令,頭部回到初試狀態。FPGA的作用是提供DSP接口邏輯,設置存儲DSP指令的RAM塊,同時產生步進電機驅動脈衝控制步進電機轉動方向和角度。

  FPGA器件為動作指令控制單元,設計採用FLEXlOKE晶片,接收DSP數據後並行控制2路步進電機。FPGA內部結構邏輯如圖4所示,FPGA內部設置2個元件為電機脈衝發生器,控制電機的工作脈衝以及正反轉。AO~A7為DSP數據輸入埠,WR為數據寫埠,P1,P2為2個步進電機驅動晶片脈衝輸入口,L1,L2為電機正反轉控制口,ENABLE為使能信號。

  

 

  RAM1和RAM2分別為2個步進電機的指令寄存器,電機脈衝發生器發出與RAM中相應數量的方波脈衝。DSP通過DO~D8數據端輸出8位指令,其中。 D8為RAM選擇,為1時選擇RAM1,為0時選擇RAM0,DO~D7為輸出電機角度,電極上下和左右旋轉角度為120°,精度為1°,初始值都為 60°,DO~D7的範圍為00000000~11111000,初始值為00111100。FPGA作為步進脈衝發生器,通過時鐘周期配置控制電機轉速,與初始值對應坐標決定正反轉。系統動作指令程序如圖5所示。

  

 

  其中R1為DSP指令寄存器,R2為當前坐標寄存器,通過DSP的輸出坐標與FPGA的當前坐標進行差值運算來確定步進電機的旋轉方向和旋轉角度,優點是可以根據新的輸入指令的變化,結束當前動作以運行新的指令,指令執行完畢後,系統清零,步進電機回到初始狀態。

  4.2 FPGA邏輯仿真

  FPGA以MAX-PLUSⅡ開發平臺,用語言為VHDL語言對上述邏輯功能進行設計,並通過JTAG接口進行了調試,FLEXl0KE晶片能夠根據DSP輸出指令輸出正確的正反轉信號和脈衝波形。

  4.3 步進電機驅動設計

  FPGA通過P1,L1,P2,L2輸出控制控制步進電機驅動晶片。步進電機驅動採用的是東芝公司生產的單片正弦細分二相步進電機驅動專用晶片TA8435H,FPGA與TA8435H電路連接如圖6。

  

 

  由於FLEX1OKE和TMS320VC5509工作電壓為3.3 V,而TA8435H為5 V和25 V,所以管腳連接使用光電耦合器件TLP521,使兩邊電壓隔離。CLK1為時鐘輸入腳,CW/CCW為正反轉控制腳,A,A,B,B為二相步進電機輸入。

  5 結 語

  系統充分利用了DSP的高處理速度和可擴展的片外存儲空間,具有高速、實時、識別率高的特點並支持大的語音庫,FPGA的使用使系統電路獲得簡化,一片 FLEXl0KE晶片可以完成2個步進電機的時序控制。雖然在處理速度和語音庫的存儲容量上與PC機系統具有一定的差距,但在機器人的微型化、低功耗和特定功能實現上,以DSP和FPGA為核心的嵌入式系統無疑具有廣闊的前景。

相關焦點

  • 基於DSP和FPGA的機器人聲控系統設計與實現
    本文引用地址:http://www.eepw.com.cn/article/21345.htm 本次設計採用了性價比較高的數位訊號處理晶片tms320vc5509作為語音識別處理器,具有較快的處理速度,使機器人在脫機狀態下,獨立完成複雜的語音信號處理和動作指令控制,fpga系統的開發降低了時序控制電路和邏輯電路在pcb板所佔的面積[1],使機器人的"大腦"的語音處理部分微型化、低功耗。
  • 基於DSP的數字掃描探針顯微鏡的硬體解決方案研究
    spm系統方案及其缺陷 現有的spm系統主要基於pci形式,該方案中,計算機通過pci卡和spm控制板保持通信,整個電子控制系統的流程圖如圖1所示。本文引用地址:http://www.eepw.com.cn/article/21555.htm
  • 基於FPGA的無損圖像壓縮系統設計
    編者按:  摘要:本文簡要介紹了圖像壓縮的重要性和常用的無損圖像壓縮算法,分析了快速高效無損圖像壓縮算法(FELICS)的優勢,隨後詳細分析了該算法的編碼步驟和硬體實現方案,最後公布了基於該方案的FPGA性能指標。
  • 基於小波變換與DSP的實時音頻視頻處理系統
    本文介紹一種基於adv611,ct8021晶片同時結合ti公司的tms320c6201晶片實現音/視頻實時處理系統。在該實時系統中,dsp晶片作為控制核心、一方面要管理adv611,ct8021,存儲器和通信接口,另一方面要對adv611的圖像壓縮效果進行調解,對數據速率實時控制。系統實現方案原理圖如圖1所示。
  • 第六講 DSP在雷達信號處理中的應用
    為了讓工程師在設計開發中完善和拓展基礎理論與系統知識,豐富應用經驗,《世界電子元器件》和中電網聯合清華大學等知名院校共同創辦了這個欄目,特約知名學者、教授以及著名半導體公司的應用工程師撰寫,以系列講座的方式對熱點ic技術進行全面而系統的介紹,涵蓋最新技術要點。最先開設的講座將圍繞三大課題:dsp、fpga和嵌入式系統,每個課題都將連載6期。
  • 基於FPGA高精度浮點運算器的FFT設計與仿真
    摘要 基於IEEE浮點表示格式及FFT算法,提出一種基2FFT的FPGA方法,完成了基於FPGA高精度浮點運算器的FFT的設計。利用VHDL語言描述了蝶形運算過程及地址產生單元,其仿真波形基本能正確的表示輸出結果。
  • 基於FPGA的巴特沃茲IIR數字帶通濾波器設計
    本文以巴特沃思數字帶通濾波器為例,較為詳細地介紹了其設計和實現方法。給定巴特沃茲數字帶通濾波器的抽樣頻率為500Hz,上、下邊帶截止頻率分別為150Hz和30Hz.2.濾波器的系統模型雙線性變換法是在低通濾波器的基礎上採用頻率變換法把低通濾波器轉換成所需要濾波器的。據此方法,我們得到如下濾波器的系統模型:
  • 基於fpga二維小波變換核的實時可重構電路
    項目背景及可行性分析本文引用地址:http://www.eepw.com.cn/article/266432.htm  2.1 項目名稱及摘要:  基於fpga二維小波變換核的實時可重構電路  現場可編程門陣列為可進化設計提供了一個理想的模板
  • 輕鬆DIY擊鼓機器人,提供詳細軟硬體設計參數和系統 解決方案
    ,請確定您已經正確開啟這些模式,通過聲控系統指示燈和觸控系統指示燈可以判斷系統是否接收到您所擊打的信號。探究過程簡述首周作為確定題目和參賽的一周,主要工作在於對確定參賽的類型,項目組成員進行相關的構思與設計,儘管已經擁有一個確定的方向,但是仍然需要確定設計的整體思路與方案,以及進行接下來工作的一些物資與資料準備。
  • 基於DSP+FPGA的紅外圖像小目標檢測系統設計
    近年來,紅外探測系統因其具有隱蔽性,抗幹擾性,全天候工作等特點,在現代戰爭中具有重要的作用,而紅外圖像中小目標的檢測將直接影響制導系統的有效作用距離及設備的複雜程度
  • 一種基於FPGA的全光纖電流互感器控制電路設計
    本文引用地址:http://www.eepw.com.cn/article/262432.htm  目前檢測和控制電路實現主要有兩種方案,一種是以數位訊號處理晶片(DSP)為核心,由於DSP的速度越來越快,使得DSP成為很多數據處理和信號檢測方案的首選,但在時序控制方面是其瓶頸,由於時序控制精度和速度直接影響光纖電流互感器的檢測精度
  • 基於FPGA與有限狀態機的高精度測角系統的設計與實
    該系統的跟蹤精度在很大程度上依賴於轉臺的旋轉角度的測量精度。本文引用地址:http://www.eepw.com.cn/article/189624.htm為了提高系統轉臺旋轉角度測量的精度,本系統採用高解析度的光電編碼器來測量角度。
  • 基於Spartan-3 FPGA的DSP功能實現方案
    雖然Spartan-3系列器件的價位可能較低,但它們同樣具有DSP設計所需的平臺特性。這些平臺特性能夠以較高的面積利用率實現信號處理功能,使設計達到更低價位點。  Spartan-3器件用作協處理器或預/後處理器是非常理想的,它們將運算密集型功能從可編程DSP上卸載下來以增強系統性能。
  • 一種基於服務機器人的視覺系統設計
    隨著計算機科學和自動控制技術的發展,越來越多的不同種類的智慧機器人出現在工廠、生活當中,機器人視覺系統作為智慧機器人系統中一個重要的子系統,也越來越受到人們的重視。它涉及了圖像處理、模式識別和視覺跟蹤等領域。不同種類的機器人由於工作的重點不一樣,它的視覺系統在軟體或硬體上都有著細微的差別。本文研究基於服務機器人的單目視覺系統。
  • 一款新型聲光控LED節能燈系統的設計方案
    圖2 系統原理框圖  根據設計要求及原理,設計出電路原理圖,如圖3所示。    圖4 系統設計結構圖  4 各組成電路韻設計與仿真  4.1 電源電路  在這樣的電路設計中,對電路元器件的要求也很高,尤其是光敏元件。光敏元件是光控電路功能實現的核心,必須保證其各項參數的精確、穩定。  半導體光敏元件是基於半導體光電效應的光電轉換傳感器,又稱光電敏感器。採用光電技術能實現無接觸、遠距離、快速和精確測量,因此半導體光敏元件還常用來間接測量能轉換成光量的其他物理或化學量。
  • 基於FPGA的RCN226絕對式編碼器通信接口設計
    0 引言 光電碼盤是一種基本的位置、速度檢測反饋單元,非常廣泛地應用於變頻器、直流伺服、交流伺服等系統的閉環控制中。目前國內外高端交流伺服系統中普遍採用FPGA+DSP結構。DSP用來實現矢量變換和其它算法流程;FPGA用以實現解碼、A、B、 Z信號輸出、I/O擴展等功能,FPGA中尚有很多資源沒有得到充分利用。
  • 基於Spartan-6 FPGA的Sinc3 Filter設計
    Sinc3濾波器的基本原理本文引用地址:http://www.eepw.com.cn/article/129009.htm  Σ-Δ ADC利用過採樣的方法將量化噪聲搬移到高頻段,後端再使用數字抽取濾波器將高頻噪聲濾除,所以數字抽取濾波器的性能對整個Σ-Δ ADC系統非常重要
  • 基於FPGA的複數浮點協方差矩陣實現
    此時,基於複數運算的協方差矩陣的實現就成為一種必然。 因此,在充分應用FPGA並行處理能力的同時,為了擴展數據處理的動態範圍,減少數據溢出機率,避免數據截斷所產生的誤差,提高協方差矩陣的運算精度以及擴展該運算的通用性。本文以空間譜估計作為研究背景,研究了複數據運算和浮點運算的特點,提出了一種適用於任何陣列流型、任意陣元的基於複數浮點運算的協方差矩陣的FPGA實現方案。
  • 基於FPGA+MATLAB的串行多階FIR濾波器設計
    本文引用地址:http://www.eepw.com.cn/article/236081.htm關鍵詞 FPGA;FIR數字濾波器;Matlab;仿真數字濾波器是用於過濾時間離散信號的數字系統,通過對抽樣數據進行數學處理達到頻域濾波的目的。