ObEN實(shí)驗(yàn)室出品 - AI舞蹈和視覺(jué)語(yǔ)音 #每周見(jiàn)
每天,ObEN的頂尖級(jí)研究人員和工程師團(tuán)隊(duì)都致力于在語(yǔ)音,計(jì)算機(jī)視覺(jué)和自然語(yǔ)言處理領(lǐng)域開(kāi)發(fā)尖端的個(gè)性化人工智能(PAI)技術(shù)。最近,我們的計(jì)算機(jī)學(xué)習(xí)團(tuán)隊(duì)在研究一種技術(shù),它能用AI直接從視頻中追蹤和學(xué)習(xí)舞蹈動(dòng)作。另一個(gè)技術(shù)則能通過(guò)AI在TTS輸入中為真實(shí)臉部動(dòng)作提供動(dòng)力——這樣您的PAI的臉就能像您的聲音一樣富有表現(xiàn)力了。
我們研究團(tuán)隊(duì)的每一項(xiàng)進(jìn)步都能幫助您的PAI變得更智能,更強(qiáng)大,更實(shí)用。訪問(wèn)projectpai.com,來(lái)了解更多有關(guān)ObEN獨(dú)家的人工智能技術(shù),以及我們是如何采用Project PAI區(qū)塊鏈來(lái)在新的數(shù)字經(jīng)濟(jì)中保護(hù)和驗(yàn)證我們的個(gè)性化人工智能的。 為方便閱讀,我們也將視頻內(nèi)容整理為文字版,內(nèi)容如下:
你好,我叫Taehwan Kim。我現(xiàn)在是ObEN機(jī)器學(xué)習(xí)團(tuán)隊(duì)的負(fù)責(zé)人。
在加入ObEN之前,我在加州理工大學(xué)獲得了博士后學(xué)位。我目前在ObEN工作的項(xiàng)目之一是視覺(jué)語(yǔ)音說(shuō)話。需要口頭語(yǔ)句或文字輸入,并在虛擬人物上生成相應(yīng)的語(yǔ)音動(dòng)畫(huà) - 就像我們的個(gè)性化人工智能形象(PAI)一樣。
此外,我們還致力于制作舞蹈動(dòng)作。在這個(gè)項(xiàng)目中,用現(xiàn)有的視頻片段,或用戶通過(guò)簡(jiǎn)單網(wǎng)絡(luò)攝像頭或手機(jī)攝像頭制作的任何視頻,我們就可以訓(xùn)練深度學(xué)習(xí)模型來(lái)提取和學(xué)習(xí)動(dòng)作。
我們可以教用戶的PAI學(xué)習(xí)完全相同的運(yùn)動(dòng)和舞蹈。這是一個(gè)以AI為基礎(chǔ)的運(yùn)動(dòng)跟蹤技術(shù)演示。
左邊的視頻是現(xiàn)有視頻,而右側(cè)展示的是我們運(yùn)用AI技術(shù)從現(xiàn)有視頻中獲取的動(dòng)作。
你可以看到,它可以移動(dòng)到各個(gè)方向,包括前,后,右和左。然后我們可以用我們提取的動(dòng)作,來(lái)制作用戶的PAI或計(jì)算機(jī)動(dòng)畫(huà)角色的舞蹈。
此處所有的動(dòng)作都是直接從現(xiàn)有視頻中提取的。通過(guò)我們的視覺(jué)語(yǔ)音技術(shù),用戶可以制作他/她的PAI用和他/她一模一樣的聲音說(shuō)話的視頻。視頻會(huì)具有高度個(gè)性化的面部動(dòng)作,而用戶本人無(wú)需錄制真實(shí)視頻,并且還能發(fā)送這個(gè)視頻給朋友。
聯(lián)系客服