近期,科技界傳來(lái)一則創(chuàng)新消息,英偉達(dá)公司聯(lián)合美國(guó)聾童協(xié)會(huì)(ASDC)及數(shù)字代理公司Hello Monday,共同推出了一款名為Signs的AI平臺(tái),該平臺(tái)專注于美式手語(yǔ)(ASL)的學(xué)習(xí)與應(yīng)用推廣。
ASL作為一種復(fù)雜的語(yǔ)言形式,結(jié)合了手勢(shì)、面部表情及空間定位等元素,這一特性使得AI模型在理解手語(yǔ)時(shí)面臨巨大挑戰(zhàn)。傳統(tǒng)的AI技術(shù)大多僅依賴手部追蹤,往往忽視了面部表情等非手勢(shì)信號(hào)的細(xì)微變化,導(dǎo)致識(shí)別效果有限。
Signs平臺(tái)打破了這一局限,它并非一個(gè)靜態(tài)的手語(yǔ)詞典,而是通過(guò)用戶貢獻(xiàn)的視頻數(shù)據(jù)不斷學(xué)習(xí)和優(yōu)化。用戶提交的真實(shí)ASL手勢(shì)視頻被用作訓(xùn)練AI模型的材料,這一做法旨在提升AI對(duì)手語(yǔ)識(shí)別的準(zhǔn)確性、可擴(kuò)展性,以及對(duì)自然手語(yǔ)風(fēng)格的深入理解。隨著用戶數(shù)據(jù)的積累,平臺(tái)的識(shí)別能力將不斷增強(qiáng)。
該平臺(tái)的核心亮點(diǎn)之一在于其提供的實(shí)時(shí)AI反饋功能。用戶可以通過(guò)攝像頭進(jìn)行手語(yǔ)表達(dá),系統(tǒng)隨即分析手勢(shì)并提供即時(shí)糾正。同時(shí),一個(gè)3D虛擬人物會(huì)演示正確的ASL手勢(shì),便于用戶直觀對(duì)比學(xué)習(xí),這一功能極大地促進(jìn)了學(xué)習(xí)效率。
英偉達(dá)的目標(biāo)遠(yuǎn)不止于此,他們致力于構(gòu)建一個(gè)能夠理解自然使用狀態(tài)下ASL的AI模型,而非僅僅依賴于僵化、預(yù)定義的動(dòng)作。目前,Signs平臺(tái)的數(shù)據(jù)集已包含40萬(wàn)個(gè)視頻片段,涵蓋了1000個(gè)手語(yǔ)單詞。英偉達(dá)計(jì)劃進(jìn)一步向更廣泛的受眾開(kāi)放平臺(tái),以擴(kuò)大數(shù)據(jù)集規(guī)模,并公開(kāi)部分?jǐn)?shù)據(jù)集,支持無(wú)障礙應(yīng)用領(lǐng)域的深入研究。