電子發(fā)燒友網(wǎng)報(bào)道（文/莫婷婷）隨著大模型技術(shù)的迅猛發(fā)展，人機(jī)交互正經(jīng)歷從“工具式響應(yīng)”向“擬人化陪伴”的深刻變革。在這一進(jìn)程中，語(yǔ)音交互作為最自然的人機(jī)溝通方式。
?
百度智能云泛科技行業(yè)解決方案總監(jiān)孫穎欣在地瓜機(jī)器人的DDC2025 人機(jī)交互分論壇上指出，大模型時(shí)代的交互方式經(jīng)歷了三個(gè)關(guān)鍵階段的演進(jìn)：第一階段是文本、語(yǔ)音交互第二階段是多模態(tài)融合交互，結(jié)合語(yǔ)音、視覺(jué)、動(dòng)作等多通道信息提升交互體驗(yàn)；第三階段則是復(fù)雜任務(wù)下的主動(dòng)自主交互，由此催生了陪伴機(jī)器人、AI寵物等新型智能硬件形態(tài)。
?
在情感陪伴場(chǎng)景中，擬真互動(dòng)需滿足四大核心要素：一是低時(shí)延，響應(yīng)控制在400到600毫秒內(nèi)，超過(guò)這個(gè)范圍，體驗(yàn)就會(huì)下降；二是有感情且?guī)в洃?；三是有個(gè)性，例如音色、內(nèi)容風(fēng)格具備獨(dú)特人格特征；四是主動(dòng)性。這四大要素共同構(gòu)建了“真實(shí)感”與“親密感”，成為新一代AI硬件成敗的關(guān)鍵。
?
為支撐這一趨勢(shì)，百度智能云聯(lián)合地瓜機(jī)器人的計(jì)算芯片旭日3和旭日5打造了多款語(yǔ)音交互方案，包括多模態(tài)互動(dòng)框架方案、端到端語(yǔ)音交互方案等，可以面向不同產(chǎn)品定位的AI硬件。
?
?
多模態(tài)互動(dòng)框架方案采用的“ASR + 大模型 + TTS”三段式架構(gòu)，資源層是全球RTN網(wǎng)絡(luò)，以及GPU/CPU算力，在此基礎(chǔ)上深度融合了聲紋識(shí)別、情緒識(shí)別、長(zhǎng)期記憶及視覺(jué)理解等能力。其既支持百度自研的文心大模型，也允許接入第三方語(yǔ)言或視覺(jué)模型；同時(shí)無(wú)縫對(duì)接百度百科、音樂(lè)、教育等垂類資源。
?
百度智能云的端到端語(yǔ)音大模型方案是業(yè)界首個(gè)基于Cross-Attention的語(yǔ)音語(yǔ)言大模型的方案，不再將語(yǔ)音先轉(zhuǎn)為文本再輸入模型，而是直接將原始音頻信號(hào)（含音色、語(yǔ)調(diào)等）作為大模型輸入，基于Cross-Attention的語(yǔ)音語(yǔ)言大模型，實(shí)現(xiàn)音義聯(lián)合建模，使模型能精準(zhǔn)捕捉“弦外之音”與情緒狀態(tài)，解決了傳統(tǒng)級(jí)聯(lián)式鏈路“情感丟失、延遲高、打斷體驗(yàn)差”等痛點(diǎn)。
?
端到端語(yǔ)音大模型方案采用高效的全查詢注意力EALLQA技術(shù)，Encoder與語(yǔ)音識(shí)別結(jié)合、Decoder與語(yǔ)音合成結(jié)合，可以實(shí)現(xiàn)對(duì)用戶question的極速理解，計(jì)算量顯著降低10倍。
?
孫穎欣介紹，端到端方案的一大優(yōu)勢(shì)是場(chǎng)景泛化能力強(qiáng)。在近場(chǎng)（如智能音箱）可提供細(xì)膩情感反饋；在遠(yuǎn)場(chǎng)則通過(guò)前端聲學(xué)優(yōu)化與噪聲建模，確保在電機(jī)轟鳴、多人交談等復(fù)雜環(huán)境中依然精準(zhǔn)拾音。例如掃地機(jī)器人等高噪聲場(chǎng)景，通過(guò)百度云端到端語(yǔ)音大模型方案的“原生抗噪”能力，可以把掃地機(jī)工作時(shí)的日常噪聲過(guò)濾掉，大幅降低了硬件端的麥克風(fēng)陣列與降噪算法成本。
?
?
?
孫穎欣指出，面對(duì)AI陪伴場(chǎng)景，沒(méi)有最好的方案，只有最合適的路徑。例如多模態(tài)互動(dòng)框架方案特別適合需要豐富內(nèi)容生態(tài)與定制化開發(fā)的AI玩具、兒童陪伴機(jī)器人等產(chǎn)品，還能夠構(gòu)建面向智能家居、AI眼鏡穿戴場(chǎng)景。未來(lái)，隨著大模型持續(xù)進(jìn)化與芯片算力提升，語(yǔ)音交互實(shí)現(xiàn)從“功能實(shí)現(xiàn)”向“情感連接”的跨越。
?
?