汕大老師做VR播放器 立體聲音頻一鍵錄入 實(shí)時(shí)“渲染”為動態(tài)聲場

◆聯(lián)合創(chuàng)始人張婷婷還是廣東時(shí)代美術(shù)館的策展人助手、藝術(shù)家助手。

文| 鉛筆道 記者 楊博宇

十年前，張婷婷還是一名實(shí)習(xí)生，在法國蓬皮杜藝術(shù)中心的聲學(xué)與音樂合作研究所做畢業(yè)論文。她在那里見識了科學(xué)家和藝術(shù)家的合作，意識到聲音和人之間不僅僅是“聽”的關(guān)系，更是一種雙向互動。

回國后，她在華南理工大學(xué)聲學(xué)研究所繼續(xù)碩士研究生學(xué)業(yè)，完成關(guān)于空間虛擬聲技術(shù)HRTF的畢業(yè)論文。之后，她從沒停止對音頻體驗(yàn)和聲音交互的思考。

“難道我們就只有立體聲和環(huán)繞聲嗎？”在這兩者之外，張婷婷一直想嘗試“發(fā)出”不同的聲音。

去年6月，張婷婷、王杰、林云帆聯(lián)合創(chuàng)立創(chuàng)聲科技——一家專注于VR音頻技術(shù)及產(chǎn)品研發(fā)的創(chuàng)業(yè)公司，為音（視）頻制作者和企業(yè)提供VR動態(tài)聲場的解決方案和音頻產(chǎn)品。

目前，創(chuàng)聲科技研發(fā)的VR播放器及VR動態(tài)聲場解決方案已經(jīng)上線；動向耳機(jī)已完成原型開發(fā)，并計(jì)劃年內(nèi)量產(chǎn)。

注:張婷婷承諾文中數(shù)據(jù)無誤，為其真實(shí)性負(fù)責(zé)，鉛筆道已備份錄音速記，為內(nèi)容客觀性背書。

去年上半年，VR風(fēng)口起來時(shí)，數(shù)娛科技CEO、錄音師林云帆找到張婷婷和廣州大學(xué)音頻技術(shù)專家王杰教授，提議三人一起從事VR音頻產(chǎn)品的開發(fā)。

在此之前，張婷婷曾就職華為從事基站物理層算法研究，之后作為合伙人參與得易電子科技有限公司的創(chuàng)業(yè)，負(fù)責(zé)專業(yè)音頻處理器研發(fā)。這兩段經(jīng)歷不僅為日后研發(fā)VR音頻產(chǎn)品作了準(zhǔn)備，更讓張了解到一家現(xiàn)代企業(yè)是如何管理的。

2013年，她任教于汕頭大學(xué)長江藝術(shù)與設(shè)計(jì)學(xué)院交互設(shè)計(jì)專業(yè)，研究聲音觀念及裝置和交互機(jī)制。任教期間，常有影視和音頻行業(yè)的朋友向她詢問VR音頻的相關(guān)情況。

因此，當(dāng)老朋友林云帆向她提議時(shí)，她很快便答應(yīng)了。根據(jù)專業(yè)知識，她判斷這件事可行，并認(rèn)為這是個(gè)推出全新體驗(yàn)的音頻產(chǎn)品的好機(jī)會。

張婷婷、王杰和林云帆對業(yè)內(nèi)已發(fā)布的產(chǎn)品進(jìn)行調(diào)研，發(fā)現(xiàn)目前市場上的VR音頻產(chǎn)品集中在制作端，如全景錄音麥克風(fēng)等，但制作出來的音頻內(nèi)容在雙聲道重放時(shí)仍然是普通的立體聲或雙耳信號，并沒有動態(tài)效果?！熬拖袷悄悴荒苡肰CD去播放DVD一樣?！?

去年6月，張婷婷、王杰和林云帆正式組建團(tuán)隊(duì)，成立創(chuàng)聲科技。他們試圖從重放端入手，解決VR動態(tài)聲場的問題。

◆創(chuàng)聲科技項(xiàng)目團(tuán)隊(duì)

為了在重放端讓聲音“動”起來，團(tuán)隊(duì)開始了大量的實(shí)驗(yàn)研究。他們根據(jù)已被學(xué)界承認(rèn)的雙耳聽覺原理，結(jié)合快速實(shí)時(shí)卷積算法，研發(fā)了DSVA技術(shù)——可實(shí)時(shí)合成動態(tài)三維空間中任意方位的聲像，并圍繞此技術(shù)申請了5項(xiàng)發(fā)明專利。

基于此，今年年初，團(tuán)隊(duì)開發(fā)出具備動態(tài)聲場重放功能的VR播放器。這款VR播放器根據(jù)手機(jī)的傳感器方位數(shù)據(jù)，將影片中的普通立體聲音頻或環(huán)繞聲音頻，實(shí)時(shí)“渲染”為動態(tài)聲場，讓用戶獲得與畫面一致的聲音方位感。這樣一來，內(nèi)容制作方在音頻制作上，不需要為VR改變?nèi)魏嗡麄円呀?jīng)熟悉的技術(shù)、流程和設(shè)備。

這款VR播放器可在安卓系統(tǒng)4.2及以上版本使用，暫時(shí)只接受定制，客戶主要是VR視頻制作者。目前，團(tuán)隊(duì)已為數(shù)享文化提供VR內(nèi)容制作的音頻服務(wù)。

此外，VR播放器的音頻處理模塊也可移植至其它各種平臺，“創(chuàng)聲科技也可通過技術(shù)授權(quán)來獲得收入”。

但在和某電視廠商合作過程中，張婷婷發(fā)現(xiàn)，研發(fā)層面的對接非常困難。對方企業(yè)管理嚴(yán)格又復(fù)雜，就算僅是開個(gè)接口，都需要向各個(gè)部門報(bào)批，進(jìn)展緩慢、推進(jìn)困難。

這次經(jīng)歷讓張婷婷下決心自己做硬件?；诙鷻C(jī)與用戶的聯(lián)系最為緊密，團(tuán)隊(duì)推出了創(chuàng)聲動向耳機(jī)。

這款耳機(jī)內(nèi)置運(yùn)動傳感器檢測用戶頭部的運(yùn)動，專業(yè)音頻處理芯片搭載DSVA技術(shù)，為用戶提供動態(tài)聲場。

目前動向耳機(jī)已完成原型機(jī)開發(fā)，并與深圳市三諾電子有限責(zé)任公司達(dá)成生產(chǎn)合作意向。產(chǎn)品預(yù)計(jì)今年年內(nèi)發(fā)布，預(yù)計(jì)售價(jià)在600～1200元。此外，另一款智向聲匣產(chǎn)品也在設(shè)計(jì)之中。

談及未來規(guī)劃，張婷婷及其團(tuán)隊(duì)希望通過人工智能和大數(shù)據(jù)優(yōu)化產(chǎn)品體驗(yàn)，例如增加智能降噪、智能音量調(diào)節(jié)等功能，另外也希望把VR播放器搭建為VR音（視）頻的內(nèi)容入口。

現(xiàn)階段，創(chuàng)聲科技正尋求300萬元天使輪融資，資金主要用于動向耳機(jī)生產(chǎn)和市場推廣。