速途網4月24日消息(報道:李楠)日前,音視頻領域的全球頂級技術社區之一LiveVideoStack Meet城市沙龍活動在深圳舉行,荔枝集團(NASDAQ:LIZI)、騰訊、阿里、萬興科技、思謀科技等音視頻技術領域的從業者匯聚一堂,共聊元宇宙中需要怎樣的音視頻技術、未來音頻技術的發展重點,技術發展正在用更好的聲音縮小物理世界和虛擬世界間隙。
用聲音縮小真實和虛擬世界間隙
荔枝集團音頻技術負責人沈俊聰會上帶來《元宇宙中的音頻技術探討》線上主題分享。從元宇宙的爆火現象切入,提到其中聲音角色定位,帶來了一線技術領域的思考和實戰經驗。
“用更好聲音縮小物理世界跟虛擬世界的間隙。”沈俊聰說,聲音在我們的日常生活中占據著至關重要的地位,在元宇宙世界里也是如此:音頻可以獨立于視頻存在,而且音頻的感知受到長短時記憶的影響更明顯。人類對聲音更加敏感,更接近心靈世界。
隨著硬件、智能技術、算力等全方面提升,沈俊聰表示,音頻內容制作形式正在創新,在音頻技術制作上,呈現出專業、易用、智能的產品。用戶對聲音的質量要求越來越高,接入設備的效果、低延時、空間音頻技術、變聲技術、環境聲學模擬等是目前聲音技術領域需要攻克的難點。
音頻的發展就是要讓聲音做到“聲臨其境”。這就包括兩個部分:“消滅”和“重塑”。消滅所有會影響現場感的因素包括噪聲、回聲、雜音等,然后根據所處的真實或虛擬的環境,重塑其中的音源和空間感知。
荔枝正在用技術讓聲音場景更豐富、更真實,在音頻的傳輸中加強對情感的敏銳捕捉,提升對音色的高辨識度,給用戶卓越的使用體驗。在提升用戶價值,突破聲音場景的目標上,基礎技術平臺的架構和發展至關重要。荔枝已推出自研RTC頻流技術平臺DOREME,荔枝的即時語音通訊平臺VoderX也將在全球市場上全面啟用,豐富用戶體驗。
憑借在音頻賽道的8年深耕,荔枝集團集聲音社交、播客內容和音頻社區為一體的音頻生態已成熟。當下用戶時間越來越碎片化,荔枝通過聲音降噪,將錄制者周圍的背景噪音過濾;開發3D音效技術,通過硬件與軟件算法的結合,將整個人體聽覺系統還原,最大限度地還原用戶在現實生活中對聲場的感受,實現身臨其境虛實結合的現場感。
據悉,沈俊聰于2013年加入荔枝,擔任音頻技術負責人,先后帶領團隊完成了多個重要項目:手機端音頻節目錄制工具,讓用戶低門檻錄制高音質音頻節目;高音質音頻直播引擎,用戶很容易就能在手機上進行高清語音直播;AI聲音理解后臺,能對不同聲音事件進行快速分類等。
元宇宙接近乃至會超越現實生活
2021年被很多人稱為“元宇宙元年”,“元宇宙第一股”Roblox火遍全球、美國社交媒體臉書(Facebook)改名“Meta”,眾多公司不斷開拓元宇宙概念邊界。
在沈俊聰看來,元宇宙最重要的特征在于,這是一個跟我們現實世界平行的虛擬世界,包括經濟、生活與創作,也包含各種社會關系,“跟我們現實生活很接近,甚至超越現實生活。”
而在元宇宙的場景中要實現全方位的沉浸感,需要不斷發展空間音頻技術、聲音分離技術、實時變聲等技術。這些技術最終都是賦能于荔枝的聲音產品。可以說聲音產品是天然契合元宇宙。
速途元宇宙研究院首席探索官趙佳茹表示,未來,隨著“元宇宙”概念的持續爆發,不同形態的設備或都將成為其入口,多端跨屏的軟件產品也將成為主流。
今年初荔枝致股東信中提到,在2022年,荔枝還將做更多的嘗試,積極擁抱元宇宙、NFT、DAO等創新理念,以此打造一個聲音的新宇宙。荔枝年會還通過設定個人專屬虛擬形象、送出數字藏品等等來迎接全新的聲音新世界。