




版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請(qǐng)進(jìn)行舉報(bào)或認(rèn)領(lǐng)
文檔簡(jiǎn)介
精品文檔-下載后可編輯LD3320的嵌入式語音識(shí)別系統(tǒng)的應(yīng)用-設(shè)計(jì)應(yīng)用摘要:語音交互系統(tǒng)是比較人性化的人機(jī)操作界面,它需要語音識(shí)別系統(tǒng)的支持。LD3320就是這樣一款語音識(shí)別芯片。介紹了該芯片的工作原理及應(yīng)用,給出了LD3320與微處理器的硬件接口電路及軟件程序。隨著MCU的不斷出現(xiàn),以MCU為的嵌入式語音交互系統(tǒng)會(huì)有非常好的應(yīng)用前景。
1概述
在現(xiàn)代社會(huì),"懶人科技"大行其道。當(dāng)面臨眾多繁瑣的按鍵操作和菜單選擇的時(shí)候,簡(jiǎn)單地說出指令,是有人情味的人機(jī)操作界面。讓身邊的各種電子設(shè)備可"聽從"人類的語音,是從電影"星球大戰(zhàn)"就開始的科技發(fā)展目標(biāo)。雖然目前的科技還不能做到讓計(jì)算機(jī)完全理解人類的所有自然語音,但是可以在一定程度上實(shí)現(xiàn)這個(gè)夢(mèng)想。
2特定人語音識(shí)別技術(shù)及原理
特定人語音識(shí)別(ASR,AutoSpeechRecognition)技術(shù)是基于"關(guān)鍵詞語列表"的識(shí)別技術(shù),它是對(duì)大量的語音數(shù)據(jù)(相當(dāng)于對(duì)數(shù)千人采集的數(shù)萬小時(shí)的有效聲音數(shù)據(jù))經(jīng)語言學(xué)家語音模型分析,建立數(shù)學(xué)模型,并經(jīng)過反復(fù)訓(xùn)練提取基元語音的細(xì)節(jié)特征,以及提取各基元間的特征差異,得到在統(tǒng)計(jì)概率化意義上的各個(gè)基元語音特征,才由資深工程師將算法以及語音模型轉(zhuǎn)換成硬件芯片并應(yīng)用在嵌入式系統(tǒng)中。
ASR技術(shù)每次識(shí)別的過程就是把用戶說出的語音內(nèi)容,通過頻譜轉(zhuǎn)換為語音特征,再將這個(gè)轉(zhuǎn)換后的語音特征和"關(guān)鍵詞語列表"中的條目一一進(jìn)行匹配,匹配的一條即作為識(shí)別結(jié)果。比如ASR技術(shù)在語音控制的手機(jī)應(yīng)用中,這個(gè)"關(guān)鍵詞語列表"的內(nèi)容就是電話本中的人名、手機(jī)的菜單命令或手機(jī)存儲(chǔ)卡中的歌曲名字。不論這個(gè)列表的條目?jī)?nèi)容是什么,只需要用戶設(shè)置相關(guān)的寄存器,就可以把相應(yīng)的待識(shí)別條目?jī)?nèi)容以字符形式傳遞給識(shí)別引擎。
由此可見,語音識(shí)別芯片完成的工作就是:把MIC(麥克風(fēng))輸入的聲音進(jìn)行頻譜分析后提取語音特征,再和關(guān)鍵詞語列表中的關(guān)鍵詞語進(jìn)行對(duì)比匹配,找出得分的關(guān)鍵詞語作為識(shí)別結(jié)果輸出。
通?;贏SR技術(shù)的語音識(shí)別芯片能在兩種情況下給出識(shí)別結(jié)果:
①外部送入預(yù)定時(shí)間的語音數(shù)據(jù)(比如5s的語音數(shù)據(jù)),芯片對(duì)這些語音數(shù)據(jù)運(yùn)算分析后,給出識(shí)別結(jié)果。
②外部送入語音數(shù)據(jù)流,語音識(shí)別芯片通過端點(diǎn)檢測(cè)(VAD,VoiceActivityDetection)技術(shù)檢測(cè)出用戶停止說話,把用戶開始說話到停止說話之間的語音數(shù)據(jù)進(jìn)行運(yùn)算分析后,給出識(shí)別結(jié)果。
對(duì)于種情況,可以理解為設(shè)定了一個(gè)定時(shí)錄音(如5s的語音數(shù)據(jù)),芯片在5s后會(huì)停止把聲音送入識(shí)別引擎,并且根據(jù)已送入引擎的語音數(shù)據(jù)計(jì)算出識(shí)別結(jié)果。
對(duì)于第二種情況,需要了解VAD的工作原理:VAD技術(shù)是在一段語音數(shù)據(jù)流中,判斷出哪個(gè)時(shí)間點(diǎn)是人聲音的開始,哪個(gè)時(shí)間點(diǎn)是人聲音的結(jié)束。判斷的依據(jù)是,在背景聲音的基礎(chǔ)上有了語音發(fā)音,則視為聲音的開始。而后,檢測(cè)到一段持續(xù)時(shí)間的背景音(比如600ms),則視為人聲說話結(jié)束。通過VAD判斷出人聲說話的區(qū)域后,語音識(shí)別芯片會(huì)把這期間的聲音數(shù)據(jù)進(jìn)行識(shí)別處理,計(jì)算出識(shí)別結(jié)果。
除了以上兩種情況外,語音識(shí)別算法無法"主動(dòng)"地判斷出是否識(shí)別出了一個(gè)結(jié)果。這是因?yàn)椋谟?jì)算過程中的任何時(shí)刻,語音識(shí)別器都會(huì)對(duì)已送人識(shí)別芯片的聲音數(shù)據(jù)進(jìn)行分析,并根據(jù)匹配程度為識(shí)別列表中的關(guān)鍵詞語進(jìn)行打分,匹配的打分。但是,由于識(shí)別算法不知道用戶后面是否還繼續(xù)說話,所以無法主動(dòng)地判斷已經(jīng)識(shí)別出的結(jié)果。
3語音識(shí)別芯片LD3320的工作原理
3.1語音識(shí)別系統(tǒng)原理結(jié)構(gòu)
LD3320語音識(shí)別芯片采用的就是ASR技術(shù),圖1就是由LD3320和單片機(jī)(或嵌入式系統(tǒng))組成的語音識(shí)別系統(tǒng)原理框圖。圖中給出了LD3320的內(nèi)部原理結(jié)構(gòu),本文中選用的MCU是STC10L08XE單片機(jī)。
圖1語音識(shí)別系統(tǒng)原理框圖
語音識(shí)別芯片LD3320是ICRoute公司的產(chǎn)品,它采用ASR技術(shù),提供了一種脫離按鍵、鍵盤、鼠標(biāo)、觸摸屏等GUI操作方式且基于語音的用戶界面VUI(VoiceUserInterface),使得用戶對(duì)該系統(tǒng)的操作更簡(jiǎn)單、快速和自然。
用戶只需要把識(shí)別的關(guān)鍵詞語以字符串的形式傳送進(jìn)芯片,即可以在下次識(shí)別中立即生效。比如,用戶在51等主控MCU的編程中,簡(jiǎn)單地通過設(shè)置芯片的寄存器,把諸如"你好"這樣的識(shí)別關(guān)鍵詞語的內(nèi)容動(dòng)態(tài)地傳入芯片中,芯片就可以識(shí)別所設(shè)定的關(guān)鍵詞語了。每個(gè)關(guān)鍵詞語可以是單字、詞組、短句或者任何的中文發(fā)音的組合?;贚D3320的語音識(shí)別系統(tǒng)可以隨著使用流程,在運(yùn)行時(shí)動(dòng)態(tài)地更改關(guān)鍵詞語列表的內(nèi)容,這樣可以用一個(gè)系統(tǒng)支持多種不同的場(chǎng)景,同時(shí)也不需要用戶作任何的錄音訓(xùn)練。
3.2LD3320的用戶使用模式
LD3320有兩種用戶使用模式,即"觸發(fā)識(shí)別模式"和"循環(huán)識(shí)別模式".用戶可以通過編程,設(shè)置兩種不同的用戶使用模式。
觸發(fā)識(shí)別模式:系統(tǒng)的主控MCU在接收到外界一個(gè)觸發(fā)后(比如用戶按動(dòng)某個(gè)按鍵),啟動(dòng)LD3320芯片的一個(gè)定時(shí)識(shí)別過程(比如5s),要求用戶在這個(gè)定時(shí)過程中說出要識(shí)別的語音關(guān)鍵詞語。這個(gè)過程結(jié)束后,需要用戶再次觸發(fā)才能再次啟動(dòng)一個(gè)識(shí)別過程。
循環(huán)識(shí)別模式:系統(tǒng)的主控MCU反復(fù)啟動(dòng)識(shí)別過程。如果沒有人說話就沒有識(shí)別結(jié)果,則每次識(shí)別過程的定時(shí)到時(shí)后再啟動(dòng)一個(gè)識(shí)別過程;如果有識(shí)別結(jié)果,則根據(jù)識(shí)別作相應(yīng)處理后(比如播放某個(gè)聲音作為回答)再啟動(dòng)一個(gè)識(shí)別過程。
4語音識(shí)別系統(tǒng)軟硬件設(shè)計(jì)
4.1硬件系統(tǒng)設(shè)計(jì)
由圖l可知,由LD3320組成的語音識(shí)別系統(tǒng)硬件有單片機(jī)(或嵌入式系統(tǒng))及LD33202.圖2和圖3分別是由單片機(jī)STC10L08XE構(gòu)成的主控芯片和由LD3320A構(gòu)成的語音識(shí)別主系統(tǒng)。
圖2STC10L08XE構(gòu)成的主控芯片
圖3LD3320A構(gòu)成的語音識(shí)別主系統(tǒng)
4.2軟件系統(tǒng)設(shè)計(jì)
語音識(shí)別的操作順序是:先進(jìn)行語音識(shí)別的初始化,然后寫入識(shí)別列表,系統(tǒng)即開始進(jìn)行語音識(shí)別,并準(zhǔn)備好中斷響應(yīng)函數(shù),打開中斷允許位。這里如果不用中斷方式,也可以通過查詢方式工作。在"開始識(shí)別"后,讀取寄存器B2H的值,如果為21H就表示有識(shí)別結(jié)果產(chǎn)生。
下面是語音識(shí)別的初始化程序段,按照以下序列來設(shè)置寄存器:
初始化后是寫入識(shí)別列表。識(shí)別列表的規(guī)則是:每個(gè)識(shí)別條目對(duì)應(yīng)一個(gè)特定的編號(hào)(1個(gè)字節(jié)),不同識(shí)別條目的編號(hào)可以相同,而且不用連續(xù)。LD3320芯片多支持50個(gè)識(shí)別條目,每個(gè)識(shí)別條目是標(biāo)準(zhǔn)普通話的漢語拼音(小寫),每2個(gè)字(漢語拼音)之間用1個(gè)空格間隔。表1是一個(gè)簡(jiǎn)單的例子。
圖4是由LD3320組成的語音識(shí)別系統(tǒng)主程序流程,圖5是語音識(shí)別系統(tǒng)中斷服務(wù)程序流程。
圖4語音識(shí)別系統(tǒng)主程序流程圖
圖5語音識(shí)別系統(tǒng)中斷程序流程
5聲控電視遙控器
聲控電視遙控器有用的地方是,在更換頻道時(shí)可以直接說出頻道名稱,而不是去記憶頻道名稱和頻道數(shù)字的聯(lián)系。同時(shí),在使用電視遙控器時(shí),遙控器是用電池工作,不能讓識(shí)別芯片一直處于工作狀態(tài)。因此在設(shè)計(jì)時(shí),可以在遙控器上設(shè)置一個(gè)大一點(diǎn)的按鍵,用戶在使用時(shí),按一下這個(gè)按鍵,啟動(dòng)LD3320語音識(shí)別芯片,此時(shí)可以播放一聲"嘀"的提示音,然后在限定的時(shí)間內(nèi)(如5s),接收用戶的語音命令,并給出識(shí)別結(jié)果。比如用戶說"體育臺(tái)",識(shí)別芯片把識(shí)別結(jié)果提供給遙控器的主控MCU.隨后遙控器的主控MCU就根據(jù)事先設(shè)定好的對(duì)應(yīng)關(guān)系,發(fā)出對(duì)應(yīng)頻道的紅外編碼,實(shí)現(xiàn)換臺(tái)??梢圆患哟_認(rèn)過程直接換臺(tái)。圖6為聲控電視遙控器工作流程。
圖6聲控電視遙控器工作流程
結(jié)語
這種語音識(shí)別系統(tǒng)也容易引起誤
溫馨提示
- 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請(qǐng)下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請(qǐng)聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會(huì)有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
- 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 人人文庫網(wǎng)僅提供信息存儲(chǔ)空間,僅對(duì)用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對(duì)用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對(duì)任何下載內(nèi)容負(fù)責(zé)。
- 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請(qǐng)與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時(shí)也不承擔(dān)用戶因使用這些下載資源對(duì)自己和他人造成任何形式的傷害或損失。
最新文檔
- 2025至2030年中國(guó)歐式印刷板插件架數(shù)據(jù)監(jiān)測(cè)研究報(bào)告
- 2025至2030年中國(guó)桌旗旗架行業(yè)投資前景及策略咨詢報(bào)告
- 2025至2030年中國(guó)樹脂水泥地面漆數(shù)據(jù)監(jiān)測(cè)研究報(bào)告
- 2025至2030年中國(guó)時(shí)裝恤衫行業(yè)投資前景及策略咨詢報(bào)告001
- 2025至2030年中國(guó)旋流分離器數(shù)據(jù)監(jiān)測(cè)研究報(bào)告
- 2025至2030年中國(guó)文化用紙抄紙機(jī)行業(yè)投資前景及策略咨詢報(bào)告
- 2025至2030年中國(guó)數(shù)控高壓鋼瓶打印機(jī)行業(yè)發(fā)展研究報(bào)告
- 新質(zhì)生產(chǎn)力3大特征
- 軟件培訓(xùn)操作指南
- 母親節(jié)感恩教育
- 一身邊的“雷鋒”(課件)五年級(jí)下冊(cè)綜合實(shí)踐活動(dòng)
- 高考語文復(fù)習(xí):詩歌語言鑒賞
- 工程造價(jià)司法鑒定報(bào)告案例
- 廣東判后答疑申請(qǐng)書
- 學(xué)校開展“躺平式”教師專項(xiàng)整治工作實(shí)施方案心得體會(huì)2篇
- 起動(dòng)機(jī)的構(gòu)造解析課件
- 中科院考博生態(tài)學(xué)和自然地理學(xué)歷年真題
- Agilent1200高效液相色譜儀操作規(guī)程
- 2022年秋季云南省普通高中學(xué)業(yè)水平考試地理試題( 含答案解析 )
- 急救物品藥品管理制度-課件
- MySQL數(shù)據(jù)庫PPT完整全套教學(xué)課件
評(píng)論
0/150
提交評(píng)論