国产亲妺妺乱的性视频播放,9797WWW成人影片,99精品国产在热久久无毒不卡 ,西方37大但人文艺术人山踪林

Uploads%2farticles%2f15711%2fhero
|
2022-07-22

用耳機(jī)就能做面部識(shí)別,看看康奈爾大學(xué)的新研究 | 元宇宙前沿

說(shuō)話、微笑、眨眼、嘟嘴,都可以實(shí)時(shí)識(shí)別生成虛擬面部表情。

前不久,一段國(guó)外女生模仿 NPC(游戲中非玩家角色)的視頻走紅,畫(huà)面中女生無(wú)論面部表情、肢體動(dòng)作都與 NPC 非常相像,一度讓人分不清到底是現(xiàn)實(shí)還是游戲。

相比于真人實(shí)力模擬虛擬形象,隨著元宇宙的興起,如今數(shù)字人則做到了對(duì)真人的虛擬復(fù)刻。

另外,在線上會(huì)議、視頻直播、運(yùn)動(dòng)健身場(chǎng)景,已經(jīng)出現(xiàn)了不少數(shù)字人身影。而用攝像頭,通過(guò)面部拍攝和 AI 算法,識(shí)別面部表情,進(jìn)而映射至相對(duì)應(yīng)的使用場(chǎng)景中,是目前行業(yè)比較主流的方案。

此外,在 XR 領(lǐng)域,此前曝光的一份 Magic Leap 專利文件,還探索了一把僅通過(guò)攝像頭拍攝眼部(如眉毛、眼睛形態(tài)變化)的方式,來(lái)識(shí)別面部表情。

最近,康奈爾大學(xué)公布的一項(xiàng)名為 EarIO 的技術(shù)研究中,使用「耳機(jī)」就做到了面部識(shí)別的功能。

在演示過(guò)程中,工作人員佩戴了一款類似開(kāi)放式耳機(jī)的設(shè)備,內(nèi)置有電池、麥克風(fēng)、發(fā)聲單元、藍(lán)牙模組等硬件裝置。

devices

實(shí)現(xiàn)原理為,將設(shè)備與手機(jī)藍(lán)牙連接,并完成程序的部署設(shè)定。在預(yù)先完成人臉轉(zhuǎn)化為虛擬形象后,通過(guò)裝置兩側(cè)的發(fā)聲單元朝面部發(fā)射音頻(人耳不可聽(tīng)的頻率)信息,麥克風(fēng)捕捉回聲。

%E2%80%98Earable%E2%80%99_uses_sonar_to_reconstruct_facial_expressions

隨著真人說(shuō)話、微笑、眨眼、嘟嘴所產(chǎn)生的面部肌肉變化,所接收到的回聲(獨(dú)特的回聲輪廓)也隨之變化,通過(guò)深度學(xué)習(xí)算法,將收集到的聲音數(shù)據(jù)與數(shù)據(jù)庫(kù)中由 TruthDepth 相機(jī)拍攝的 52 個(gè)面部表情參數(shù)完成匹配,最終轉(zhuǎn)化為實(shí)時(shí)的面部表情。

%E2%80%98Earable%E2%80%99_uses_sonar_to_reconstruct_facial_expressions
%E2%80%98Earable%E2%80%99_uses_sonar_to_reconstruct_facial_expressions

不同于攝像頭的大體積、高功耗,作為耳機(jī)形態(tài)的 EarIO 在這方面也有著天然的優(yōu)越性。EarIO 可以以 86Hz 的頻率進(jìn)行采樣,功耗僅為 154mW。

當(dāng)然,EarIO 目前也存在著不少問(wèn)題,比如設(shè)備并不能做到即戴即用,而是需要至少花上半個(gè)小時(shí)進(jìn)行數(shù)據(jù)訓(xùn)練。同時(shí),在數(shù)據(jù)的判別上略顯不足,有一定的出錯(cuò)率。該研究團(tuán)隊(duì)表示,后續(xù)將會(huì)繼續(xù)優(yōu)化,攻克這些問(wèn)題。

據(jù)悉,EarIO 已經(jīng)做到了與市售的無(wú)線視頻會(huì)議耳機(jī)兼容,支持視頻會(huì)議下虛擬頭像的使用。

灣里點(diǎn)評(píng):在今年 GTC 大會(huì)上,英偉達(dá)也亮相了一款名為 Audio2Face 的應(yīng)用,應(yīng)用了大量的深度學(xué)習(xí)和語(yǔ)音技術(shù),僅使用說(shuō)話者語(yǔ)音即可模擬人物 3D 表情。

而無(wú)論是通過(guò)攝像頭、麥克風(fēng)硬件的方式,還是以音頻 AI 純軟件算法合成,殊途同歸,或許未來(lái)都將成為構(gòu)建元宇宙世界「虛擬表情」重要的應(yīng)用技術(shù)。


主筆:達(dá)達(dá) / 深圳灣

編輯:陳述 / 深圳灣

>>
Back to top btn
主站蜘蛛池模板: 乌什县| 康平县| 宁阳县| 巴林左旗| 肇州县| 嘉峪关市| 桂阳县| 胶南市| 容城县| 调兵山市| 隆安县| 太仓市| 合肥市| 措美县| 金川县| 平泉县| 云和县| 沁阳市| 长宁县| 南华县| 韩城市| 安顺市| 阿坝县| 长葛市| 靖西县| 剑川县| 通海县| 广南县| 获嘉县| 天长市| 滁州市| 鞍山市| 黄浦区| 屯留县| 台湾省| 晴隆县| 婺源县| 五寨县| 兴隆县| 蓬溪县| 浏阳市|