賈揚(yáng)清作為人工智能領(lǐng)域的頂尖專家(阿里巴巴前技術(shù)副總裁、Lepton AI創(chuàng)始人),對(duì)AI的發(fā)展方向有著深刻洞察。當(dāng)談到“智能語(yǔ)音設(shè)備”這一具體方向時(shí),他認(rèn)為需要從人工智能的根本問(wèn)題出發(fā)來(lái)審視。
一、人工智能的三大重要問(wèn)題
賈揚(yáng)清多次強(qiáng)調(diào),當(dāng)前AI的核心挑戰(zhàn)可以歸結(jié)為三點(diǎn):
- 算力與效率的平衡:模型越來(lái)越大,但部署成本、能耗和響應(yīng)速度是繞不開(kāi)的瓶頸。語(yǔ)音設(shè)備是典型的端側(cè)場(chǎng)景,不能完全依賴云端。
- 數(shù)據(jù)與泛化能力:語(yǔ)音交互面臨口音、噪聲、多語(yǔ)種混說(shuō)等長(zhǎng)尾問(wèn)題。模型必須在少樣本甚至零樣本下保持魯棒。
- 從感知到認(rèn)知的躍遷:語(yǔ)音設(shè)備不能只做“聽(tīng)寫”,而要理解意圖、上下文和情感,實(shí)現(xiàn)真正的對(duì)話智能。
二、智能語(yǔ)音設(shè)備的現(xiàn)狀與瓶頸
賈揚(yáng)清指出,智能語(yǔ)音設(shè)備(智能音箱、語(yǔ)音助手、車載語(yǔ)音等)在過(guò)去幾年進(jìn)步顯著,但仍有明顯短板:
- 交互不自然:響應(yīng)延遲高、不能隨時(shí)打斷、多輪對(duì)話容易“失憶”。
- 場(chǎng)景局限:在安靜近場(chǎng)表現(xiàn)好,但在遠(yuǎn)場(chǎng)、噪聲、多人說(shuō)話時(shí)準(zhǔn)確率驟降。
- 隱私與成本:始終在線的麥克風(fēng)引發(fā)隱私擔(dān)憂,而端側(cè)算力又限制了模型大小。
- 生態(tài)割裂:不同設(shè)備、不同廠商之間無(wú)法無(wú)縫協(xié)同。
三、賈揚(yáng)清給出的解題思路
- 端云協(xié)同的推理架構(gòu):將輕量模型放在設(shè)備端做喚醒和初步識(shí)別,復(fù)雜理解交給云端。關(guān)鍵是要統(tǒng)一訓(xùn)練和部署框架(如他主導(dǎo)過(guò)的MNN、TensorRT等思路)。
- 以數(shù)據(jù)為中心:與其盲目加大模型,不如系統(tǒng)性地收集和標(biāo)注真實(shí)場(chǎng)景的語(yǔ)音數(shù)據(jù),特別是帶噪聲、多說(shuō)話人、口音的“難樣本”。
- 多模態(tài)融合:語(yǔ)音設(shè)備應(yīng)結(jié)合視覺(jué)(攝像頭)、傳感器(加速度計(jì)、距離感應(yīng))甚至環(huán)境上下文,來(lái)提升意圖理解的準(zhǔn)確率。
- 隱私優(yōu)先設(shè)計(jì):本地處理敏感語(yǔ)音,只上傳脫敏后的特征或意圖,而非原始音頻。
四、未來(lái)展望
賈揚(yáng)清認(rèn)為,智能語(yǔ)音設(shè)備的終極形態(tài)不是“能聽(tīng)會(huì)說(shuō)的音箱”,而是無(wú)處不在的環(huán)境智能——你不需要刻意喚醒某個(gè)設(shè)備,房間、汽車、耳機(jī)都能自然理解你的需求,并且彼此協(xié)作。這需要:
- 更高效的端側(cè)模型(如1B參數(shù)以下但性能接近大模型)
- 標(biāo)準(zhǔn)化的語(yǔ)音交互協(xié)議
- 對(duì)“對(duì)話狀態(tài)追蹤”和“長(zhǎng)期記憶”的突破
##
賈揚(yáng)清的視角提醒我們:智能語(yǔ)音設(shè)備的問(wèn)題,本質(zhì)上是人工智能在效率、泛化、認(rèn)知三個(gè)維度上的縮影。只盯著語(yǔ)音識(shí)別準(zhǔn)確率是遠(yuǎn)遠(yuǎn)不夠的。只有把算法、算力、數(shù)據(jù)、隱私和用戶體驗(yàn)統(tǒng)籌考慮,語(yǔ)音設(shè)備才能真正從“工具”進(jìn)化為“伙伴”。